KR20120004587A - A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver - Google Patents

A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver Download PDF

Info

Publication number
KR20120004587A
KR20120004587A KR1020100065150A KR20100065150A KR20120004587A KR 20120004587 A KR20120004587 A KR 20120004587A KR 1020100065150 A KR1020100065150 A KR 1020100065150A KR 20100065150 A KR20100065150 A KR 20100065150A KR 20120004587 A KR20120004587 A KR 20120004587A
Authority
KR
South Korea
Prior art keywords
stream
information
content
format
converted
Prior art date
Application number
KR1020100065150A
Other languages
Korean (ko)
Inventor
이해수
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020100065150A priority Critical patent/KR20120004587A/en
Publication of KR20120004587A publication Critical patent/KR20120004587A/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/08Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

PURPOSE: A digital broadcasting receiver and stream processing method in a digital broadcasting receiver are provided to convert content in a specific format into content in the other format. CONSTITUTION: A digital broadcasting receiver reprocesses input 2D stream(S901). The digital broadcasting receiver converts the reprocessed 2D stream into 3D stream according to a defined type(S902). The digital broadcasting receiver generates stream index information, thumbnail image information, 3D format information and identification information about converted 3D stream(S903). The digital broadcasting receiver stores the converted 3D stream with identification information(S904).

Description

디지털 방송 수신기 및 디지털 방송 수신기에서 스트림 처리 방법{A DIGITAL BROADCAST RECEIVER AND A METHOD FOR PROCESSING A STREAM IN A DIGITAL BROADCAST RECEIVER}A DIGITAL BROADCAST RECEIVER AND A METHOD FOR PROCESSING A STREAM IN A DIGITAL BROADCAST RECEIVER}

본 발명은 디지털 방송 수신기 및 디지털 방송 수신기에서 스트림 처리 방법에 관한 것으로, 더욱 상세하게는 디지털 방송 수신기에서 2D(dimensional) 또는/및 3D(dimensional) 컨텐츠가 포함된 스트림을 처리하는 방법에 관한 것이다.The present invention relates to a stream processing method in a digital broadcast receiver and a digital broadcast receiver, and more particularly, to a method for processing a stream including 2D (dimensional) and / or 3D (dimensional) content in a digital broadcast receiver.

일반적으로 3D(dimensional) 이미지(또는 입체 이미지)는 두 눈의 스테레오(stereo) 시각 원리를 이용하여 입체감을 제공한다. 인간은 두 눈의 시차, 다시 말해 약 65mm 정도 떨어진 두 눈 사이의 간격에 의한 양안 시차(binocular parallax)를 통해 원근감을 느끼므로, 3D 이미지는 좌안과 우안 각각이 연관된 평면 이미지를 보도록 이미지를 제공하여 입체감과 원근감을 제공할 수 있다.In general, a 3D image (or a stereoscopic image) provides a stereoscopic effect using a stereo vision principle of two eyes. Humans feel perspective through the parallax of two eyes, that is, the binocular parallax by the distance between two eyes about 65mm apart, so the 3D image provides an image so that each of the left and right eyes can see an associated plane image. It can provide three-dimensional and perspective.

이러한 3D 이미지를 디스플레이 방법에는 스테레오스코픽(stereoscopic) 방식, 부피표현(volumetric) 방식, 홀로그래픽(holographic) 방식 등이 있다. 스테레오스코픽 방식의 경우, 좌안에서 시청되기 위한 좌영상 이미지(left view image)와 우안에서 시청되기 위한 우영상 이미지(right view image)를 제공하여, 편광 안경 또는 디스플레이 장비 자체를 통해 좌안과 우안이 각각 좌영상 이미지와 우영상 이미지를 시청함으로써 3D 효과를 인지할 수 있도록 한다.The 3D image display method includes a stereoscopic method, a volumetric method, a holographic method, and the like. In the stereoscopic method, a left view image for viewing in the left eye and a right view image for viewing in the right eye are provided so that the left eye and the right eye respectively through polarizing glasses or the display device itself. The 3D effect can be recognized by viewing the left image and the right image.

본 발명에서 이루고자 하는 기술적 과제는, 디지털 방송 수신기에서 수신되는 방송 스트림 내 특정 포맷의 컨텐츠를 다른 포맷의 컨텐츠로 변환 및 처리하는 방법, 상기 변환 처리된 컨텐츠를 사용자에게 제공하는 방법을 제공하는 데 있다.An object of the present invention is to provide a method for converting and processing content of a specific format in a broadcast stream received by a digital broadcast receiver into content of another format, and providing a method for providing the converted content to a user. .

본 발명에 따라 디지털 방송 수신기에서 스트림(stream) 처리 방법의 일 예는, 입력되는 2D 스트림을 재가공(redefine)하는 단계; 재가공된 2D 스트림을 기정의된(pre-determined) 방식에 따라 3D 스트림으로 변환(convert)하고, 변환된 3D 스트림에 대하여 스트림 인덱스 정보(stream index information), 썸네일 이미지 정보(thumbnail image information), 3D 포맷 정보(3D format information) 및 부가 정보(additional information) 중 적어도 하나 이상을 포함한 식별 정보(identification information)를 생성하는 단계; 및 변환된 3D 스트림을 상기 식별 정보와 함께 저장하는 단계;를 포함한다.According to the present invention, an example of a method of processing a stream in a digital broadcast receiver includes: re-defining an input 2D stream; Convert the reprocessed 2D stream into a 3D stream according to a pre-determined method, and stream index information, thumbnail image information, and 3D for the converted 3D stream. Generating identification information including at least one of 3D format information and additional information; And storing the converted 3D stream together with the identification information.

이때, 상기 스트림 인덱스 정보는, 스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보(picture type information), 스트림 오프셋 정보(stream offset information) 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함할 수 있다.In this case, the stream index information may include at least one of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.

그리고 상기 썸네일 이미지 정보는, 스트림의 정지 영상(still image)을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The thumbnail image information may include a thumbnail image, which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position in the stream of the thumbnail image. have.

또한, 상기 스트림 정보는, 스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함할 수 있다.The stream information may include at least one of reproduction information, time information, and size information of the stream.

그리고 상기 3D 포맷 정보는, 싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함할 수 있다.The 3D format information may include identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.

또한, 상기 기정의된 방식은, 입력되는 2D 스트림에 대해 기 정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보(depth information)를 추정하여 추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이(depth)를 적용하여 3D 스트림으로 변환할 수 있다.The predefined method may perform motion analysis on a predetermined 2D stream in a predetermined unit and estimate depth information based on the result of the motion analysis to estimate the depth information. Based on the depth, the 2D stream may be converted into a 3D stream.

본 발명에 따른 디지털 방송 수신기에서 스트림 처리 방법의 다른 예는, 입력되는 2D 스트림을 재가공하고, 재가공된 2D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하는 단계; 재가공된 2D 스트림을 상기 식별 정보와 함께 저장하는 단계; 저장된 2D 스트림을 추출하고, 추출된 2D 스트림을 기정의된 방식에따라 3D 스트림으로 변환하는 단계; 상기 3D 스트림을 출력하는 단계;를 포함한다.Another example of a stream processing method in a digital broadcast receiver according to the present invention includes reprocessing an input 2D stream and including at least one or more of stream index information, thumbnail image information, 3D format information, and additional information for the reprocessed 2D stream. Generating identification information; Storing the reprocessed 2D stream with the identification information; Extracting the stored 2D stream and converting the extracted 2D stream into a 3D stream according to a predefined manner; And outputting the 3D stream.

이때, 상기 스트림 인덱스 정보는, 스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함할 수 있다.In this case, the stream index information may include at least one of picture type information, stream offset information, and picture characteristic information with respect to each picture constituting the stream.

그리고 상기 썸네일 이미지 정보는, 스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The thumbnail image information may include a thumbnail image which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.

또한, 상기 스트림 정보는, 스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함할 수 있다.The stream information may include at least one of reproduction information, time information, and size information of the stream.

그리고 상기 3D 포맷 정보는, 싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함할 수 있다.The 3D format information may include identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.

또한, 상기 기정의된 방식은, 입력되는 2D 스트림에 대해 기정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하여, 추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환하는 할 수 있다.In addition, the predefined method may perform a motion analysis in a predetermined unit on the input 2D stream, estimate depth information based on the motion analysis result, and based on the estimated depth information. You can apply depth to a 2D stream and convert it to a 3D stream.

본 발명에 따라 디지털 방송 수신기에서 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하고, 변환된 3D 스트림을 출력하는 방법의 일 예는, 변환된 3D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하는 단계; 상기 식별 정보에 기초하여 변환된 3D 스트림이 다른 스트림과 구분되어 표시되도록 구성한 UI(User Interface)를 제공하는 단계; 및 상기 UI를 통한 외부 입력에 따라 상기 변환된 3D 스트림을 출력하는 단계;를 포함한다.According to the present invention, an example of a method of converting a 2D stream into a 3D stream and outputting the converted 3D stream in a digital broadcasting receiver according to the present invention includes: stream index information, thumbnail image information, Generating identification information including at least one of 3D format information and additional information; Providing a user interface (UI) configured to display the converted 3D stream separately from other streams based on the identification information; And outputting the converted 3D stream according to an external input through the UI.

이때, 상기 스트림 인덱스 정보는, 스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함할 수 있다.In this case, the stream index information may include at least one of picture type information, stream offset information, and picture characteristic information with respect to each picture constituting the stream.

그리고 상기 썸네일 이미지 정보는, 스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The thumbnail image information may include a thumbnail image which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.

또한, 상기 스트림 정보는, 스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함할 수 있다.The stream information may include at least one of reproduction information, time information, and size information of the stream.

그리고 상기 3D 포맷 정보는, 싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함할 수 있다.The 3D format information may include identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.

또한, 상기 기정의된 방식은, 입력되는 2D 스트림에 대해 기 정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하여, 추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환할 수 있다.In addition, the predefined method may perform motion analysis on a predetermined 2D stream in a predetermined unit, estimate depth information based on the result of the motion analysis, and based on the estimated depth information. You can apply depth to a 2D stream and convert it to a 3D stream.

그리고 상기 변환된 3D 스트림은, 현재 튜닝된 채널을 통해 수신되는 스트림으로부터 실시간으로 변환되거나 기 저장된 2D 스트림으로부터 변환될 수 있다.The converted 3D stream may be converted in real time from a stream received through a currently tuned channel or from a pre-stored 2D stream.

본 발명에 따른 디지털 방송 수신기의 일 예는, 2D 스트림을 수신하는 수신부; 2D 스트림을 재가공하고, 재가공된 2D 스트림에 대한 참조 정보를 생성하는 제1 스트림 매니저; 재가공된 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하는 변환부; 변환된 3D 스트림에 대한 참조 정보를 생성하고, 상기 3D 스트림의저장 및 재생을 제어하는 제2 스트림 매니저; 재가공된 2D 스트림 및 변환된 3D 스트림을 상기 각 스트림에 대해 생성된 식별정보와 함께 저장하는 저장부; 및 변환된 3D 스트림을 출력하는 출력부;를 포함한다.One example of a digital broadcast receiver according to the present invention includes a receiver for receiving a 2D stream; A first stream manager for reprocessing the 2D stream and generating reference information for the reprocessed 2D stream; A conversion unit for converting the reprocessed 2D stream into a 3D stream according to a predefined method; A second stream manager for generating reference information on the converted 3D stream and controlling storage and playback of the 3D stream; A storage unit for storing the reprocessed 2D stream and the converted 3D stream together with identification information generated for each stream; And an output unit configured to output the converted 3D stream.

이때, 상기 변환부는, 제1 스트림 매니저로부터 재가공된 2D 스트림과 저장부로부터 추출되는 기 재가공된 2D 스트림 중 적어도 하나를 수신하여 3D 스트림으로 변환할 수 있다.In this case, the converter may receive at least one of a 2D stream reprocessed from the first stream manager and a preprocessed 2D stream extracted from the storage unit and convert the received 2D stream into a 3D stream.

그리고 상기 2D 스트림에 대한 참조 정보는, 2D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The reference information about the 2D stream may include at least one of stream index information, thumbnail image information, 3D format information, and additional information about the 2D stream.

또한, 상기 3D 스트림에 대한 참조 정보는, 변환된 3D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The reference information about the 3D stream may include at least one of stream index information, thumbnail image information, 3D format information, and additional information about the converted 3D stream.

그리고 상기 스트림 인덱스 정보는, 스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함할 수 있다.The stream index information may include at least one of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.

또한, 상기 썸네일 이미지 정보는, 스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함할 수 있다.The thumbnail image information may include a thumbnail image, which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.

그리고 상기 스트림 정보는, 스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함할 수 있다.The stream information may include at least one of reproduction information, time information, and size information of the stream.

또한, 상기 3D 포맷 정보는, 싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함할 수 있다.The 3D format information may include identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.

그리고 상기 기정의된 방식은, 입력되는 2D 스트림에 대해 기 정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하고, 추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환할 수 있다.The predefined method performs motion analysis on a predetermined 2D stream in a predetermined unit, estimates depth information based on the motion analysis result, and based on the estimated depth information. You can apply depth to the stream to convert it to a 3D stream.

또한, 변환된 3D 스트림이 다른 스트림과 구분되어 표시되도록 구성된 UI를 생성하도록 제어하는 제어부;를 더 포함할 수 있다.The apparatus may further include a controller configured to generate a UI configured to display the converted 3D stream separately from other streams.

그리고 상기 제어부는, 저장된 3D 스트림에 대한 참조 정보에 기초하여, 변환된 3D 스트림이 다른 스트림과 차별화되는 썸네일 이미지 정보, 저장부의 여유 공간을 표시하도록 제어할 수 있다.The controller may control to display the thumbnail image information and the free space of the storage unit in which the converted 3D stream is differentiated from other streams based on reference information about the stored 3D stream.

본 발명에 따르면,According to the invention,

첫째, 특정 포맷으로 제작된 컨텐츠를 다른 포맷으로 변환할 수 있는 효과가 있다.First, there is an effect that can convert the content produced in a specific format to another format.

둘째, 변환된 컨텐츠를 포함하여 컨텐츠를 사용자가 편리하게 제공할 수 있는 효과가 있다.Second, there is an effect that the user can conveniently provide the content, including the converted content.

셋째, 변환된 컨텐츠에 대해 디지털 방송 수신기의 다양한 기능이 실현되도록 처리할 수 있는 효과가 있다.Third, there is an effect that can be processed to realize the various functions of the digital broadcast receiver for the converted content.

넷째, 기존의 디지털 방송 수신기와의 호환성을 가지는 효과가 있다.Fourth, there is an effect having compatibility with the existing digital broadcast receiver.

도 1은 3D 원리와 관련하여, 좌영상 데이터와 우영상 데이터의 시차에 따라 사용자의 입체감을 느낄 수 있는 원근감을 설명하기 위해 도시한 것,
도 2는 싱글 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면,
도 3은 멀티 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면,
도 4는 본 발명에 따른 디지털 방송 수신기 구성의 일 예를 도시한 블록도,
도 5는 본 발명에 따라 디지털 방송 수신기에서 2D에서 3D로 변환하는 과정을 설명하기 위한 개념도,
도 6은 본 발명에 따라 3D 타임머신 기능 구현을 위한 디지털 방송 수신기 내 구성 블록도,
도 7은 본 발명에 따라 3D 컨텐츠에 대한 3D UI를 추가한 일 실시 예를 도시한 것,
도 8은 도 7에서 썸네일과 관련된 3D UI를 보다 상세하게 설명하기 위해 도시한 것, 및
도 9 내지 11은 본 발명에 따라 디지털 방송 수신기에서 컨텐츠를 포함한 스트림을 처리하는 방법의 각 실시예를 설명하기 위해 도시한 순서도이다.
1 is a view illustrating a perspective in which a user may feel a three-dimensional effect according to a parallax between left image data and right image data in relation to a 3D principle;
2 illustrates a stereoscopic image multiplexing format of a single video stream format;
3 illustrates a stereoscopic image multiplexing format of a multi video stream format;
4 is a block diagram showing an example of a configuration of a digital broadcast receiver according to the present invention;
5 is a conceptual diagram illustrating a process of converting from 2D to 3D in a digital broadcasting receiver according to the present invention;
6 is a block diagram of a digital broadcast receiver for implementing a 3D time machine function according to the present invention;
7 illustrates an embodiment of adding a 3D UI for 3D content according to the present invention;
FIG. 8 is a diagram illustrating in detail the 3D UI related to a thumbnail in FIG. 7, and
9 to 11 are flowcharts illustrating each embodiment of a method for processing a stream including content in a digital broadcast receiver according to the present invention.

본 발명의 다른 목적, 특성 및 이점들은 첨부한 도면을 참조한 실시 예들의 상세한 설명을 통해 설명되지만, 본 발명의 권리범위는 후술하는 실시예들에 의해 제한되거나 한정되는 것은 아니다.Other objects, features, and advantages of the present invention will be described with reference to the accompanying drawings in detail, but the scope of the present invention is not limited or limited by the embodiments described below.

본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.As used herein, terms used in the present invention are selected from general terms that are widely used in the present invention while taking into account the functions of the present invention, but these may vary depending on the intention or custom of a person skilled in the art or the emergence of new technologies. In addition, in certain cases, there is a term arbitrarily selected by the applicant, and in this case, the meaning will be described in the corresponding description of the invention. Therefore, it is intended that the terminology used herein should be interpreted based on the meaning of the term rather than on the name of the term, and on the entire contents of the specification.

이하, 상기 목적이 구체적으로 실현될 수 있는 본 발명의 바람직한 실시 예가 첨부된 도면을 참조하여 설명된다.Hereinafter, preferred embodiments of the present invention in which the above object can be specifically realized are described with reference to the accompanying drawings.

본 발명은 디지털 방송 수신기(digital broadcast receiver) 및 디지털 방송 수신기에서 스트림(stream) 처리 방법에 관한 것으로, 더욱 상세하게는 상기 스트림에 포함된 컨텐츠(contents)의 포맷 변환/처리(format conversion/processing)와 그 제공 방법에 관한 것이다. 여기서, 본 발명에서는 상기 변환된 컨텐츠 제공시에 사용자(user)의 인식(recognition) 및 선택(selection)의 편의를 고려하여 관련된 UI(User Interface)를 제공하고자 한다.The present invention relates to a digital broadcast receiver and a method for processing a stream in a digital broadcast receiver, and more particularly, to format conversion / processing of contents included in the stream. And a method of providing the same. Here, the present invention is to provide a related user interface (UI) in consideration of the recognition and selection of a user when providing the converted content.

본 명세서에서는 본 발명의 이해를 돕고 설명의 편의를 위해, 컨텐츠의 포맷 변환/처리와 관련하여, 2D(2-Dimensional) 컨텐트를 3D(3-Dimensional) 컨텐트로 변환하는 것을 예로 하여 설명한다. 다만, 본 발명의 권리 범위는 상기한 사항에 한정되는 것은 아니며, 반대 경우에도 적용 가능하다.In the present specification, for the convenience of description and convenience of description, the conversion of 2D (2-Dimensional) content into 3D (3-Dimensional) content will be described as an example with respect to format conversion / processing of content. However, the scope of the present invention is not limited to the above matters, and may be applied to the opposite case.

이하에서는 우선 컨텐츠의 포맷 변환/처리 방법에 대해 설명하고, 이후 그러한 컨텐츠를 사용자에게 제공하는 방법에 대해 설명한다. 다만, 상기 각 방법은 각각 하나의 실시예의 형태로 존재할 수도 있고, 서로 결합된 형태로 하나의 실시예가 될 수도 있다.
Hereinafter, a description will be given of a format conversion / processing method of content, and a method of providing such content to a user will be described. However, each of the above methods may be present in the form of one embodiment, or may be combined in the form of one embodiment.

컨텐츠contents 포맷 변환/처리 방법 Format conversion / processing method

이하에서는 본 발명에 따라 디지털 방송 수신기에서 수신되는 스트림 내 특정 포맷의 컨텐트를 다른 포맷으로 변환/처리하는 방법에 대해 기술한다.Hereinafter, a method of converting / processing a content of a specific format in a stream received by a digital broadcast receiver into another format according to the present invention will be described.

본 발명에 따라 2D 컨텐트의 3D 컨텐트로 변환/처리하는 과정을 설명함에 있어, 우선 3D의 기본 원리 및 그 포맷에 대해 간략하게 설명하면, 다음과 같다.
In describing the process of converting / processing 2D content into 3D content according to the present invention, the basic principle and format of 3D will be briefly described as follows.

일반적으로 3D 영상(또는 입체 영상)은, 인간의 두 눈의 스테레오(stereo) 시각 원리를 이용하여 입체감을 제공한다. 인간은 두 눈의 시차, 다시 말해 약 65mm 정도 떨어진 두 눈 사이의 간격에 의한 양안 시차(binocular parallax)를 통해 원근감을 느끼므로, 3D 영상은 좌안과 우안이 각각 연관된 평면 영상을 보도록 영상을 제공하여 입체감과 원근감을 제공할 수 있다.
In general, a 3D image (or a stereoscopic image) provides a stereoscopic effect using a stereo visual principle of two human eyes. Humans feel perspective through the parallax of two eyes, that is, the binocular parallax due to the distance between two eyes about 65mm apart, so 3D image provides an image so that the left and right eyes can see the associated planar image. It can provide three-dimensional and perspective.

도 1은 3D 원리와 관련하여, 좌영상 데이터와 우영상 데이터의 시차에 따라 사용자의 입체감을 느낄 수 있는 원근감을 설명하기 위해 도시한 것이다.FIG. 1 is a view illustrating a perspective in which a user may feel a three-dimensional effect according to a parallax between left image data and right image data in relation to a 3D principle.

도 1(a)는 우영상 데이터(101)와 좌영상 데이터(102)의 시차가 좁은 경우에 상기 양 데이터의 결합에 의해 맺히는 상의 위치(103)를 설명한다. 이에 반해, 도 1(b)는 우영상 데이터(111)와 좌영상 데이터(112)의 시차가 상대적으로 도 1(a)에 비해 넓은 경우에 상기 양 데이터의 결합에 의해 맺히는 상의 위치(113)를 설명한다. 도 1(a) 내지 1(b)를 참조하면, 좌/우 영상 데이터의 시차에 따라 좌안 및 우안으로부터 서로 다른 위치(또는 거리)에서 상이 맺히고, 이러한 상의 위치에 따라 사람의 눈은 원근감의 정도를 느낄 수가 있다.FIG. 1A illustrates the image position 103 formed by combining the two data when the parallax between the right image data 101 and the left image data 102 is narrow. In contrast, FIG. 1B illustrates an image position 113 formed by combining both data when the parallax of the right image data 111 and the left image data 112 is relatively wider than that of FIG. 1A. Explain. 1 (a) to 1 (b), images are formed at different positions (or distances) from the left eye and the right eye according to the parallax of the left and right image data, and according to the position of the image, the human eye has a degree of perspective I can feel it.

도 1(a)에서, 상(103)은 우안으로 우영상 데이터(101)의 일측과 다른 측을 바라보는 연장선(R1,R2)을 그리고, 좌안으로 좌영상 데이터(102)에 대해 동일한 방식으로 연장선(L1,L2)을 그릴 때, 상기 우영상 데이터에 대한 연장선(R1)과 좌영상 데이터에 대한 연장선(L1)이 우안 및 좌안으로부터 일정 거리(d1)에서 교차되는 지점에 맺힌다. 도 1(b)에서, 상(113)은 도 1(a)를 참조하면, 우영상 데이터에 대한 연장선(R3)과 좌영상 데이터에 대한 연장선(L3)이 우안 및 좌안으로부터 일정 거리(d2)에서 교차되는 지점에서 맺힌다. 여기서, 양안으로부터 상이 맺힌 위치(103,113)까지의 거리를 나타내는 d1(도 1(a))과 d2(도 1(b))를 비교하면, 상기 d1이 d2보다 양안으로부터의 거리가 더 멀다. 즉, 도 1(a)에서의 상이 도 1(b)에서의 상보다 양안으로부터 더 먼 거리에서 맺힌다. In Fig. 1 (a), the image 103 draws the extension lines R1 and R2 facing one side and the other side of the right image data 101 to the right eye, and the same way for the left image data 102 to the left eye. When the extension lines L1 and L2 are drawn, the extension line R1 for the right image data and the extension line L1 for the left image data are formed at a point where they cross at a predetermined distance d1 from the right eye and the left eye. In FIG. 1B, when the image 113 is shown in FIG. 1A, the extension line R3 for the right image data and the extension line L3 for the left image data are a predetermined distance d2 from the right eye and the left eye. At the point where they intersect. Here, comparing d1 (Fig. 1 (a)) and d2 (Fig. 1 (b)), which represent the distances from the two eyes to the positions 103 and 113, the distance from both eyes is greater than d2. That is, the image in Fig. 1 (a) is formed at a distance farther from both eyes than the image in Fig. 1 (b).

이는 좌/우영상 데이터의 간격(도면을 기준으로 횡 방향)에서 기인한다. 예를 들면, 도 1(a)에서의 우/좌영상 데이터(101/102)의 간격은, 도 1(b)에서의 우/좌영상 데이터(103/104)의 간격에 비하여 상대적으로 좁다. 그러므로, 도 1(a) 및 1(b)를 참조하면, 각 영상 데이터의 간격이 좁을수록 좌/우영상 데이터의 결합에 의해 맺히는 상은, 상대적으로 사람의 눈으로부터 먼 거리에서 형성되어 멀게 느껴진다.This is due to the interval (lateral direction based on the drawing) of the left / right image data. For example, the interval of the right / left image data 101/102 in FIG. 1 (a) is relatively narrow compared to the interval of the right / left image data 103/104 in FIG. 1 (b). Therefore, referring to Figs. 1 (a) and 1 (b), as the interval of each image data becomes narrower, the image formed by the combination of the left and right image data is formed at a relatively far distance from the human eye and feels far.

본 발명과 관련하여, 3D 영상 표현 방법은, 2 개의 시점을 고려하는 스테레오스코픽 영상 방식과 3 개 이상의 시점을 고려하는 다시점 영상(multiple view image) 방식이 있다. 이에 비해 종래의 싱글 뷰 이미지(single view image) 방식은 모노스코픽 영상 방식이라 지칭된다.In relation to the present invention, a 3D image representation method includes a stereoscopic image method considering two viewpoints and a multiple view image method considering three or more viewpoints. In contrast, the conventional single view image method is called a monoscopic image method.

스테레오스코픽 영상 방식은, 일정한 거리로 이격되어 있는 좌측 카메라와 우측 카메라로 동일한 피사체를 촬영하여 획득한 좌우 한 쌍의 영상을 사용한다. 다시점 영상은 일정한 거리나 각도를 갖는 3 개 이상의 카메라에서 촬영하여 획득한 3 개 이상의 영상을 사용한다.The stereoscopic imaging method uses a pair of left and right images obtained by photographing the same subject by a left camera and a right camera that are spaced at a constant distance. The multi-view image uses three or more images obtained by photographing three or more cameras having a constant distance or angle.

스테레오스코픽 영상 또는 다시점 영상은 MPEG(Moving Picture Experts Group)을 포함하여 여러 가지 방법으로 압축 부호화되어 전송될 수 있다. 예를 들어, 스테레오 영상 또는 다시점 영상은 H.264/AVC(Advanced Video Coding) 방식으로 압축 부호화되어 전송될 수 있다. 이때, 디지털 방송 수신기는, H.264/AVC 코딩 방식의 역으로 수신되는 영상을 복호하여 3D 영상을 얻을 수 있다. 또한, 스테레오스코픽 영상의 좌영상 데이터와 우영상 데이터 중 하나 또는 다시점 영상 중 하나의 영상을 기본 계층(base layer) 영상으로, 나머지 영상은 확장 계층(extended layer or enhanced layer) 영상으로 할당하고, 기본 계층의 영상은 모노스코픽(mono-scopic) 영상과 동일한 방식으로 부호화하고, 확장 계층의 영상은 기본 계층과 확장 계층의 영상간의 관계 정보에 대해서만 부호화하여 전송할 수 있다. 여기서, 기본 계층 영상에 대한 압축 부호화 방식의 예로 JPEG(Joint Photographic Experts Group), MPEG-2, MPEG-4, H.264/AVC 방식 등이 사용될 수 있다. 또한, 상위 계층의 영상에 대한 압축 부호화 방식은 H.264/MVC(Multi-view Video Coding) 방식이 사용될 수 있다. 본 명세서에서 상술한 압축 부호화 방식은 일 예로 든 것으로, 그 밖에 다른 압축 부호화 방식이 이용될 수 있음은 자명하다.The stereoscopic image or the multiview image may be compressed and transmitted in various ways, including a moving picture expert group (MPEG). For example, a stereo image or a multiview image may be compressed and transmitted by using an H.264 / AVC (Advanced Video Coding) method. In this case, the digital broadcast receiver may obtain a 3D image by decoding the image received in the reverse of the H.264 / AVC coding scheme. In addition, one of the left image data and the right image data of the stereoscopic image or one of the multi-view image is assigned to the base layer (base layer) image, the remaining image is extended layer (extended layer or enhanced layer) image, An image of the base layer may be encoded in the same manner as a mono-scopic image, and an image of the enhancement layer may be encoded and transmitted only for relationship information between the image of the base layer and the enhancement layer. Here, as an example of a compression encoding scheme for the base layer image, a JPEG (Joint Photographic Experts Group), MPEG-2, MPEG-4, H.264 / AVC scheme, or the like may be used. In addition, H.264 / MVC (Multi-view Video Coding) may be used as the compression encoding scheme for the video of the higher layer. The compression coding scheme described above is an example, and it is obvious that other compression coding schemes may be used.

또한, 스테레오스코픽 영상의 전송 포맷에는, 싱글 비디오 스트림 포맷(single video stream format)과 멀티 비디오 스트림 포맷(multi video stream format)이 있다. 상기 싱글 비디오 스트림 포맷은 2 시점의 비디오 데이터를 하나의 비디오 스트림에 멀티플렉싱(multiplexing)하여 전송하는 방식으로, 하나의 비디오 스트림에 비디오 데이터를 전송하므로 3D 방송 서비스를 제공함에 있어서 추가로 요구되는 대역폭(bandwidth)이 크지 않은 이점 이 있다. 상기 멀티 비디오 스트림 포맷은 복수의 비디오 데이터를 복수의 비디오 스트림으로 전송하는 방식으로, 대역폭은 증가하나 고용량의 데이터 전송이 가능하여 고화질의 비디오 데이터를 디스플레이할 수 있는 이점이 있다.
In addition, the transmission format of the stereoscopic video includes a single video stream format and a multi video stream format. The single video stream format is a method of multiplexing video data of two views into a single video stream and transmitting the video data in one video stream, thereby providing additional bandwidth required for providing a 3D broadcasting service. There is an advantage that bandwidth is not large. The multi-video stream format is a method of transmitting a plurality of video data to a plurality of video streams, the bandwidth is increased, but the high-capacity data transmission is possible to display high-quality video data.

도 2는 싱글 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면이다.2 illustrates a stereoscopic image multiplexing format of a single video stream format.

싱글 비디오 스트림 포맷에는, (a)의 사이드바이사이드(side-by-side), (b)의 탑/바텀(top/bottom), (c)의 인터레이스드(interlaced), (d)의 프레임 시퀀셜(frame sequential), (e)의 체커 보드(checker board), (f)의 애너글리프(anaglyph) 등이 있다.The single video stream format includes side-by-side of (a), top / bottom of (b), interlaced (c), and frame sequential of (d). (frame sequential), checker board of (e), anaglyph of (f), and the like.

(a)의 사이드바이사이드 포맷은, 좌영상과 우영상을 각각 수평방향으로 1/2 다운샘플링(down-sampling)하고, 샘플링된 하나의 영상을 좌측에, 샘플링된 나머지 하나의 영상을 우측에 위치시켜 하나의 스테레오스코픽 영상을 구성한다. (b)의 탑/바텀 포맷은, 좌영상과 우영상을 각각 수직방향으로 1/2 다운샘플링하고, 샘플링된 하나의 영상을 상부에, 샘플링된 나머지 하나의 영상을 하부에 위치시켜 하나의 스테레오스코픽 영상을 구성한다. (c)의 인터레이스드 포맷은, 좌영상과 우영상을 각각 수평방향으로 라인마다 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성하거나, 좌영상과 우영상을 각각 수직방향으로 라인마다 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성한다. (d)의 프레임 시퀀셜 포맷은, 하나의 비디오 스트림에 좌영상과 우영상을 시간적으로 교차하여 구성한다. (e)의 체커보드 포맷은, 좌영상과 우영상을 각각 수직 및 수평방향으로 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성한다. (f)의 애너글리프 포맷은, 보색 대비를 이용하여 입체 효과를 내도록 영상을 구성한다.
In the side-by-side format of (a), the left and right images are down-sampled 1/2 in the horizontal direction, respectively, one sampled image on the left and the other sampled image on the right. Position to form a stereoscopic image. In the top / bottom format of (b), the left and right images are half downsampled in the vertical direction, and one sampled image is placed on the top and the other sampled image is placed on the bottom. Compose a scopic image. In the interlaced format of (c), the left and right images are each half-sampled to cross each line in the horizontal direction, so that the two images are composed of one image, or the left and right images are respectively lined vertically. The two images are composed of one image by half downsampling to cross each time. The frame sequential format of (d) is configured by temporally intersecting a left video and a right video in one video stream. In the checkerboard format of (e), the two images are configured as one image by half-sampling the left image and the right image so as to intersect in the vertical and horizontal directions, respectively. The anaglyph format of (f) composes an image to produce a stereoscopic effect using complementary color contrast.

도 3은 멀티 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면이다.3 illustrates a stereoscopic image multiplexing format of a multi video stream format.

(a)의 풀 좌/우(Full left/right) 포맷은 좌 영상과 우 영상을 순차적으로 각각 전송하는 경우이고, (b)의 풀 좌/하프 우(Full left/half right) 포맷은 좌영상은 그대로, 우영상은 수직 또는 수평 방향으로 1/2 서브-샘플링(sub-sampling)하여 전송하는 경우이다. (c)의 2D 비디오/깊이(2D video/depth) 포맷은 좌영상과 우영상 중 하나의 영상과 다른 하나의 영상을 만들어 내기 위한 깊이 정보를 함께 전송하는 경우이다.The full left / right format of (a) is a case of sequentially transmitting the left and right images respectively, and the full left / half right format of (b) is the left image. As it is, the right image is a case of transmitting by sub-sampling 1/2 sub-sampling in the vertical or horizontal direction. The 2D video / depth format of (c) is a case in which one of the left and right images is transmitted together with depth information for producing another image.

수신 시스템에서 이러한 다양한 방식으로 전송된 비디오 데이터를 효율적으로 디멀티플렉싱(demultiplexing)하여 비디오 데이터를 처리하려면 상술한 멀티플렉싱 포맷에 대한 정보를 전송해 줄 필요가 있다.In order to process video data by efficiently demultiplexing video data transmitted in such various ways in a receiving system, it is necessary to transmit information on the multiplexing format described above.

이상 본 발명과 관련하여, 3D 개념 및 포맷에 관해 간략하게 살펴보았다. 다만, 이하 본 명세서에서는 본 발명의 이해를 돕고 출원인의 설명의 편의를 위해, 스테레오스코픽 영상 방식을 예로 하여 설명하나, 본 발명의 사상이 상기 스테레오스코픽 영상 방식에 한정되는 것은 아니며 예를 들어, 다시점 영상에도 동일 또는 유사한 방식으로 적용될 수 있다.In the above, the 3D concept and format have been briefly described. However, in the present specification, for the sake of understanding of the present invention and for the convenience of the applicant, the stereoscopic video method will be described as an example, but the idea of the present invention is not limited to the stereoscopic video method, for example, again. The same may be applied to the point image in the same or similar manner.

관련하여, 종래 컨텐츠는, 평면적인 2D 포맷의 2D 컨텐츠가 주류였으나, 최근 할리우드의 3D 영화가 인기를 끌면서 3D 컨텐츠에 대한 관심이 고조되고 있다. 이러한 3D 개념 자체는 평면적인 2D 컨텐츠에 비해 보다 실재감과 입체감을 주는 것으로, 건축 등 다른 분야에서 기 사용 중에 있다. 다만, 현재까지 제작된 방송용 3D 컨텐츠의 수 또는 양은 절대적으로 부족한 것이 사실이다.In relation to the conventional content, 2D content in a planar 2D format has been mainstream, but as 3D movies in Hollywood have become popular, interest in 3D content is increasing. The 3D concept itself is more realistic and three-dimensional than the planar 2D contents, and is being used in other fields such as architecture. However, it is true that the number or quantity of broadcast 3D contents produced to date is absolutely insufficient.

이러한 3D 컨텐츠의 부족은 방송 환경의 변화에도 불구하고, 아직까지 3D 관련 국제 기술 표준 예를 들어, 코덱(Codec), 포맷(Format), 매체별 전송표준, 인터페이스(Interface) 표준, 품질 측정 표준 등이 만들어지지 않아 컨텐츠 제작업자나 수신기 제조업체에서 혼란을 주는 것도 하나의 원인이 되고 있다.This lack of 3D content, despite changes in the broadcast environment, has yet to be 3D related international technical standards, such as Codec, Format, Media-specific transmission standards, Interface standards, Quality measurement standards, etc. The lack of this confusion in content producers and receiver manufacturers is also a cause.

또한, 3D 컨텐츠는 아날로그 방송 시대에서 디지털 방송 시대로의 전환만큼 큰 영향을 주지 못할 수도 있다. 이는 3D 포맷 자체에 대한 기술적인 문제도 있을 수 있으나, 모든 컨텐츠가 3D일 필요는 없으며, 컨텐츠의 특성이나 수요, 효과 등에 따라 해당 컨텐츠의 2D/3D 제작 여부 등이 결정되어야 하기 때문이다.In addition, 3D content may not have as much influence as the transition from the analog broadcasting age to the digital broadcasting age. This may be due to a technical problem with the 3D format itself, but not all contents need to be 3D, and whether or not 2D / 3D production of the contents should be determined according to characteristics, demands, effects, etc. of the contents.

따라서, 향후 방송 환경에서 2D 컨텐츠와 3D 컨텐츠는 혼재할 수 있으며, 디지털 방송 수신기의 입장에서는 2D 컨텐츠와 3D 컨텐츠를 모두 수신하여 처리할 수 있어야 할 것이다. 더 나아가 기 존재하는 2D 컨텐츠와 중복하여 새롭게 3D 컨텐츠로 제작하는 것이 현실적으로 비용이나 시간의 면에서 많은 부담이 될 수 있는바, 디지털 방송 수신기에 2D 컨텐츠와 3D 컨텐츠 간에 포맷 변환이 가능하다면, 많은 2D 컨텐츠를 재활용할 수 있으며, 사용자에게 다양한 방송 환경을 보다 쉽고 간편하게 제공할 수 있어, 사용자, 수신기 제조자, 컨텐츠 제공업업자 등 다수를 만족시킬 수 있는 이점이 있다.
Therefore, 2D content and 3D content may be mixed in a future broadcasting environment, and a digital broadcast receiver should be able to receive and process both 2D content and 3D content. Furthermore, the production of new 3D content by overlapping with existing 2D content can be a burden in terms of cost or time in reality. If a digital broadcast receiver can convert a format between 2D content and 3D content, many 2D The content can be recycled, and various broadcasting environments can be easily and easily provided to the user, thereby satisfying a large number of users, receiver manufacturers, content providers, and the like.

디지털 방송 수신기Digital broadcast receiver

이하에서는 본 발명에 따라 2D 컨텐츠를 3D 컨텐츠로 포맷 변환 및 처리할 수 있는 디지털 방송 수신기에 관해 설명한다. 여기서, 상기 디지털 방송 수신기는 종래 2D 컨텐츠와 3D 컨텐츠도 처리할 수 있다.
Hereinafter, a digital broadcast receiver capable of converting and processing 2D content into 3D content according to the present invention will be described. Here, the digital broadcast receiver can also process conventional 2D content and 3D content.

도 4는 본 발명에 따른 디지털 방송 수신기의 일 예를 설명하기 위해 도시한 구성 블록도이다.4 is a block diagram illustrating an example of a digital broadcast receiver according to the present invention.

디지털 방송 수신기는, 튜너부(401), 복조부(402), 역다중화부(403), 시그널링 정보 처리부(404), 애플리케이션 제어부(405), 외부 입력 수신부(409), 처리부(410), 제어부(415), UI 제어부(416), 저장부(408/417), 믹서부(418), 출력 포맷터부(419) 및 디스플레이 모듈(420)을 포함한다. 상기 디지털 방송 수신기의 일 예로 디지털 텔레비전 수신기(digital television receiver)를 들 수 있다. 본 발명에 따른 상기 디지털 방송 수신기는, 필요에 따라 첨부된 도면에 도시된 구성에서 일부 구성이 제외되거나 반대로 일부 구성이 추가될 수 있다. 또한, 상기 각 구성은 필요에 따라 병합되어 하나의 구성으로 기능할 수도 있다. 그 밖에 상기 애플리케이션 제어부(405)는 채널 관련 채널 매니저(406)와 채널 맵(407)을 포함하고, 처리부(410)는 오디오/비디오 디코더(411/412), 스케일러(413) 및 비디오 프로세서(414)를 포함할 수 있다. 또한, 상기 디지털 방송 수신기는, 하나 또는 그 이상의 구성에서 본 발명에 따른 포맷 변환을 위한 하드웨어 구성 또는 소프트웨어 모듈을 포함하여 처리할 수 있다.The digital broadcast receiver includes a tuner unit 401, a demodulator 402, a demultiplexer 403, a signaling information processor 404, an application controller 405, an external input receiver 409, a processor 410, and a controller. 415, a UI controller 416, a storage unit 408/417, a mixer unit 418, an output formatter unit 419, and a display module 420. An example of the digital broadcast receiver is a digital television receiver. In the digital broadcast receiver according to the present invention, some components may be excluded from the components shown in the accompanying drawings, or vice versa. In addition, the above components may be merged as necessary to function as one configuration. In addition, the application controller 405 includes a channel-related channel manager 406 and a channel map 407, and the processor 410 includes an audio / video decoder 411/412, a scaler 413, and a video processor 414. ) May be included. In addition, the digital broadcast receiver may include a hardware configuration or a software module for format conversion according to the present invention in one or more configurations.

전술한 바와 같이, 도 4의 디지털 방송 수신기에서는, 포맷 변환되지 않은 전형적인 2D 컨텐츠와 3D 컨텐츠도 처리할 수 있다. 특히, 수신되는 방송 스트림에 포함된 컨텐츠가 2D 컨텐츠인 경우, 디지털 방송 수신기는 입력되는 2D 컨텐츠를 3D 컨텐츠 처리에 특화된 구성 예를 들어, 출력 포맷터부(419)를 바이패스(by-pass)되도록 제어함으로써, 종래 디지털 방송 수신기와 호환성(backward compatibility)을 가질 수 있다.As described above, the digital broadcast receiver of FIG. 4 may also process typical 2D content and 3D content that are not format converted. In particular, when the content included in the received broadcast stream is 2D content, the digital broadcast receiver is configured to bypass the input formatter unit 419 by, for example, a configuration specialized for processing 3D content. By controlling, it may have backward compatibility with a conventional digital broadcast receiver.

본 발명과 관련하여, 컨텐츠는 다양한 루트를 통해 다양한 형태로 디지털 방송 수신기로 제공될 수 있다. 예를 들어, 컨텐츠는 외부 장치에서 디지털 방송 수신기로 제공될 수도 있으며, 또는 방송 신호에 포함되어 제공될 수도 있다.In connection with the present invention, the content may be provided to the digital broadcast receiver in various forms through various routes. For example, the content may be provided to the digital broadcast receiver from an external device, or may be provided in a broadcast signal.

전자의 경우, 컨텐츠의 처리 과정은 다음과 같다.In the former case, the processing of the content is as follows.

외부 입력 수신부(409)는, 다양한 프로토콜에 의해 디지털 방송 수신기에 연결된 외부 장치로부터 컨텐츠를 수신하여 애플리케이션 제어부(405)로 전송한다. 상기 애플리케이션 제어부(405)는, 처리부(410), UI 제어부(416) 믹서부(418) 및 디스플레이 모듈(420) 중 적어도 하나 이상의 구성으로 입력되는 컨텐츠 및 상기 컨텐츠에 관한 정보를 전달한다.The external input receiver 409 receives content from an external device connected to the digital broadcast receiver through various protocols and transmits the content to the application controller 405. The application controller 405 transmits content input in at least one or more configurations of the processor 410, the UI controller 416, the mixer 418, and the display module 420, and information about the content.

입력되는 컨텐츠가 처리부(410)로 전달되면, 처리부 내 비디오 프로세서(414)는 전달된 컨텐츠를 처리하여 제어부(415) 및 믹서부(418) 중 적어도 하나의 구성이나 다시 애플리케이션 제어부(405)로 전송한다. 여기서, 상기 처리라 함은 예를 들어, 해당 컨텐츠의 타입, 성격 내지 포맷과 같은 속성을 판단하고, 판단된 컨텐츠의 속성에 따라 필요한 동작을 하는 것을 통칭하는 의미로 사용될 수 있다. 여기서, 상기 컨텐츠의 속성은, 다양한 방식에 의해 판단될 수 있는바, 해당 컨텐츠에 속성 정보가 있으면 이를 추출하여 추출된 속성 정보에 근거하여 해당 컨텐츠의 속성이 판단되나 그렇지 않은 경우에는 해당 컨텐츠에 대한 적절한 후속 처리를 위해 다른 방법 또는 자체적인 기준으로 판단할 수도 있다.When the input content is delivered to the processor 410, the video processor 414 in the processor processes the transmitted content and transmits the at least one of the controller 415 and the mixer 418 or the application controller 405 to the application controller 405. do. In this case, the processing may be used to mean, for example, determining an attribute such as a type, a personality or a format of the corresponding content, and performing a necessary operation according to the determined attribute of the content. Here, the attribute of the content may be determined by various methods. If there is attribute information in the content, the attribute of the content is determined based on the extracted attribute information. Otherwise, the attribute of the content is determined. It may be judged by other methods or on its own basis for appropriate subsequent processing.

후자의 경우, 컨텐츠 처리 과정은 다음과 같다.In the latter case, the content processing process is as follows.

튜너부(401)는 특정 채널을 튜닝하여 튜닝된 채널로부터 컨텐츠가 포함된 디지털 방송 신호 즉, 방송 스트림을 수신한다.The tuner 401 tunes a specific channel to receive a digital broadcast signal including a content, that is, a broadcast stream, from the tuned channel.

복조부(402)는 수신된 디지털 방송 신호의 변조 방식에 대응되는 복조 방식으로 복조한다.The demodulator 402 demodulates the demodulation scheme corresponding to the modulation scheme of the received digital broadcast signal.

역다중화부(4206)는 복조된 디지털 방송 신호로부터 오디오/비디오 데이터 및 시그널링 정보를 역다중화(demultiplex)하여 오디오 디코더(412), 비디오 디코더(411) 및 시그널링 정보 처리부(404)로 각각 출력한다. 여기서, 역다중화부(4206)는, PID(Packet IDentifier)를 이용하여 필터링함으로써 디지털 방송 신호를 역다중화할 수 있다. 또한, 상기 시그널링 정보는, 편의상 PSI/PSIP(Program Specific Information/Program and System Information Protocol)와 같은 SI(System Information) 정보를 예로 하여 설명한다.The demultiplexer 4206 demultiplexes audio / video data and signaling information from the demodulated digital broadcast signal and outputs the demultiplexed signals to the audio decoder 412, the video decoder 411, and the signaling information processor 404, respectively. Here, the demultiplexer 4206 can demultiplex the digital broadcast signal by filtering using a PID (Packet IDentifier). In addition, the signaling information is described by taking SI information such as PSI / PSIP (Program Specific Information / Program and System Information Protocol) as an example.

시그널링 정보 처리부(404)는, 입력되는 시그널링 정보를 처리하여 채널 매니저(406), 제어부(415), 믹서부(418) 중 적어도 하나 이상의 구성으로 출력한다. 이때, 시그널링 정보 처리부(404)는 필요한 경우 내부에 데이터베이스를 포함하여 처리된 시그널링 정보를 저장할 수도 있다.The signaling information processing unit 404 processes the input signaling information and outputs the signal in at least one of the channel manager 406, the controller 415, and the mixer 418. In this case, the signaling information processor 404 may store the processed signaling information including a database therein as necessary.

애플리케이션 제어부(405)는, 리모컨(remote controller)이나 프론트 패널(front panel)을 통해 외부 입력에 대응되는 기능이 수행될 수 있도록 제어 신호를 생성하여 필요한 구성으로 전달하거나 관련 OSD 데이터를 생성하여 디스플레이 모듈(420)을 통해 출력되도록 제어할 수 있다.The application controller 405 generates a control signal and transmits it to a required configuration or generates related OSD data so that a function corresponding to an external input can be performed through a remote controller or a front panel. It may be controlled to be output through the 420.

채널 매니저(406)는, 입력되는 시그널링 정보 특히, 채널 관련 정보에 근거하여 채널 맵(407)을 형성하고, 튜너부(401)를 제어하여 특정 채널이 튜닝되도록 제어할 수도 있다.The channel manager 406 may form a channel map 407 based on the input signaling information, in particular, channel related information, and control the tuner 401 to tune a specific channel.

제1 저장부(408)는, 애플리케이션 제어부(405)로부터 특정 데이터를 수신하여 저장하거나, 업데이트된 채널 맵(407)의 특정 데이터가 저장될 수 있다.The first storage unit 408 may receive and store specific data from the application control unit 405, or may store specific data of the updated channel map 407.

처리부(410)는, 입력되는 컨텐츠에 대한 기본적인 처리를 담당한다. 여기서, 상기 기본적인 처리라 함은, 컨텐츠의 포맷 내지 속성에 따라 디스플레이 모듈(420)에서 출력될 수 있는 형태 또는 부가 처리를 위한 토대 형성을 위한 처리를 의미하는 것으로 이러한 예로, 오디오 디코딩, 비디오 디코딩, 스케일링(scaling) 및 비디오 프로세싱(video processing) 등이 포함된다. 비디오/오디오 디코더(411/412)는, 입력되는 비디오/오디오 데이터를 엔코딩된(encoded) 방식에 대응되는 방식으로 디코딩한다. 스케일러부(413)는, 입력되는 데이터를 후단에서 처리 가능한 신호의 크기로 조정하기 위하여 스케일링한다. 비디오 프로세서(414)는 입력되는 비디오 데이터를 출력 형태에 맞게 비디오 프로세싱을 수행한다. 상기에서 입력되는 오디오/비디오 데이터는, 처리부 내 각 구성을 모두 거칠 수도 있으나 필요에 따라 특정 구성에서만 처리될 수도 있고, 병기된 도면 부호에 따라 반드시 순차적으로 처리될 필요는 없다.The processing unit 410 is responsible for the basic processing of the input content. Here, the basic processing means processing for forming a basis for the form or additional processing that can be output from the display module 420 according to the format or attribute of the content. Examples of the basic processing include audio decoding, video decoding, Scaling, video processing, and the like. The video / audio decoders 411 and 412 decode the input video / audio data in a manner corresponding to an encoded manner. The scaler 413 scales the input data to adjust the size of the signal which can be processed later. The video processor 414 performs video processing on the input video data according to the output form. The audio / video data input above may go through each configuration in the processing unit, but may be processed only in a specific configuration as necessary, and may not necessarily be sequentially processed according to the reference numerals.

제어부(415)는, 시스템 전반의 모든 동작들을 제어할 수 있다. 예를 들어, 제어부(415)는 입력되는 시그널링 정보(signalling information)에 기초하여 처리부(410)를 제어하여, 처리부(410)로 입력되는 컨텐츠가 적절하게 처리될 수 있도록 제어한다. 또한, 상기 제어부(410)는 시그널링 정보 등에 기초하여 컨텐츠의 특성에 부합하는 적절한 UI(User Interface)를 생성 및 후단의 믹서부(418)에서 컨텐츠와 믹싱되어 적절하게 출력될 수 있도록 UI 제어부(416)를 제어할 수도 있다.The controller 415 may control all operations of the system as a whole. For example, the controller 415 controls the processing unit 410 based on the input signaling information, so that the content input to the processing unit 410 can be appropriately processed. In addition, the control unit 410 generates a suitable UI (User Interface) corresponding to the characteristics of the content based on the signaling information, and the UI control unit 416 so as to be properly mixed with the content in the mixer unit 418 of the subsequent stage ) Can also be controlled.

UI 제어부(416)는 애플리케이션 제어부(405)로부터 부가 정보를 수신하여 제2 저장부(417)에 저장되도록 제어할 수 있다. 여기서, 상기 부가 정보에는, 애플리케이션 제어부(405)에서 수신하여 전달하는 컨텐츠와 관련된 정보나 OSD 데이터, 2D/3D UI 등이 포함될 수 있다. UI 제어부(416)는 또한, 제어부(415)의 제어를 받아 처리부(410)에서 출력되는 컨텐츠와 함께 출력될 UI를 제2 저장부(417)에서 추출하여 예를 들면, 처리부(410)에서 출력되는 컨텐츠와 동기(synchronization)되어 출력되도록 믹서부(418)로 출력할 수 있다.The UI controller 416 may receive additional information from the application controller 405 and control it to be stored in the second storage unit 417. Here, the additional information may include information related to content received and transmitted by the application controller 405, OSD data, 2D / 3D UI, and the like. The UI controller 416 also extracts a UI to be output along with the content output from the processor 410 from the second storage unit 417 under the control of the controller 415 and outputs the UI from the processor 410, for example. It may be output to the mixer 418 to be output in synchronization with the content to be synchronized.

제어부(415)는 또한, 입력되는 컨텐츠에 관한 시그널링 정보에 근거하여 해당 컨텐츠의 포맷 내지 속성을 판단하여 해당 컨텐트가 2D 컨텐츠인지 3D 컨텐츠인지 판단하여, 그에 따라 후단의 각 구성들에서 적절하게 처리되도록 제어 신호를 출력할 수 있다.The control unit 415 may also determine the format or property of the corresponding content based on the signaling information about the input content, determine whether the corresponding content is 2D content or 3D content, and accordingly process them in the subsequent components accordingly. The control signal can be output.

UI 제어부(416)는, 상기 제어부(415)의 제어를 받아 제2 저장부(417)에 기 저장된 3D 컨텐츠임을 식별시키는 식별정보를 추출하도록 제어하고, 추출된 식별정보를 이용하여 기식별된 3D 컨텐츠가 다른 컨텐츠와 구분되어 UI상에서 표시되도록 제어한다. 예를 들어, UI 제어부(416)는 UI 상의 미리보기 이미지나 썸네일 이미지상의 적절한 위치에 출력되도록 OSD 데이터를 생성하여 출력할 수 있다.Under the control of the controller 415, the UI controller 416 controls to extract identification information identifying the 3D content that is pre-stored in the second storage unit 417, and 3D identified using the extracted identification information. Controls the content to be displayed on the UI distinguished from other content. For example, the UI controller 416 may generate and output the OSD data to be output at an appropriate position on the preview image or thumbnail image on the UI.

믹서부(418)는, 시그널링 정보 처리부(404), 처리부(410) 및 UI 제어부(416)의 입력들에 근거하여 입력되는 데이터들을 믹싱(mixing)한다.The mixer 418 mixes input data based on inputs of the signaling information processor 404, the processor 410, and the UI controller 416.

출력 포맷터(419)는, 디스플레이 모듈(420)의 디스플레이 주파수에 따라 믹싱된 데이터들을 재구성(re-configure)한다. 여기서, 출력 포맷터(419)는 예를 들어, 2D 컨텐츠의 경우에는 바이패스되도록 하여 바로 디스플레이 모듈(420)에서 출력되도록 전달만 하고, 3D 컨텐츠에 대해서는 그 포맷 및 디스플레이 모듈(420)의 출력 주파수 등에 따라 3D 포맷으로 처리될 수 있도록 구성하는 3D 포맷터로 동작될 수 있다. 출력 포맷터(419)는 또한, 재구성된 컨텐츠의 디스플레이 모듈(420)에서의 출력 신호에 맞게 동기 신호를 생성하고, 생성된 동기 신호를 해당 컨텐츠의 시청을 위해 필요한 외부 장치로 출력할 수 있다. 이러한 외부 장치로 예를 들어, 3D 컨텐츠 시청을 위해 필요한 셔터 안경(421)이 있을 수 있다.The output formatter 419 re-configures the mixed data according to the display frequency of the display module 420. In this case, the output formatter 419, for example, bypasses the 2D content and transfers the output formatter 4420 to be immediately output from the display module 420. For the 3D content, the output formatter 419 transmits the format and the output frequency of the display module 420. Therefore, it can be operated as a 3D formatter configured to be processed in a 3D format. The output formatter 419 may also generate a synchronization signal according to the output signal from the display module 420 of the reconstructed content, and output the generated synchronization signal to an external device required for viewing the corresponding content. As such an external device, there may be, for example, shutter glasses 421 required for viewing 3D content.

디스플레이 모듈(420)은 디스플레이 주파수에 따라 입력되는 신호를 출력한다. 여기서, 상기 디스플레이 주파수는 예를 들어, 120, 240, 480 Hz 등 다양한 주파수가 포함된다.The display module 420 outputs a signal input according to the display frequency. Here, the display frequency includes a variety of frequencies, such as 120, 240, 480 Hz.

도 4에서는 상술한 디지털 방송 수신기의 구성 외에 별도로 출력되는 3D 컨텐츠의 포맷에 따라 3D 컨텐츠를 적절하게 시청하기 위한 구성을 더 도시하였다. 도 4에서는, 패시브(passive) 방식에서 3D 컨텐츠의 시청을 위해 셔터 안경(421)이 도시되었다. 여기서, 셔터 안경(421)은 출력 포맷터부(419)로부터 전달되는 동기 신호에 따라 디스플레이 모듈(420)을 통해 출력되는 3D 컨텐츠의 동기에 맞게 작동함으로써 사용자는 3D 컨텐츠를 부담없이 즐길 수 있다. 상기 셔터 안경(421)는 또한, 상기 출력 포맷터(419)로부터 동기 신호를 수신하기 위한 수신부(미도시)를 더 포함할 수 있다.
In addition to the configuration of the digital broadcast receiver described above, FIG. 4 further illustrates a configuration for properly viewing the 3D content according to the format of the 3D content separately output. In FIG. 4, shutter glasses 421 are shown for viewing 3D content in a passive manner. Here, the shutter glasses 421 operate in accordance with the synchronization of the 3D content output through the display module 420 according to the synchronization signal transmitted from the output formatter unit 419, so that the user can freely enjoy the 3D content. The shutter glasses 421 may further include a receiver (not shown) for receiving a synchronization signal from the output formatter 419.

2D/3D 변환(2D 2D / 3D conversion (2D TOTO 3D  3D ConversionConversion ))

이상 디지털 방송 수신기에서 본 발명과 관련하여, 각종 컨텐츠가 처리되는 과정들에 대해 기술하였다. 이하에서는 2D 컨텐츠를 3D 컨텐츠로 변환하여 처리하는 과정에 대해 기술한다.
In the above, the processes of processing various contents in the digital broadcasting receiver have been described. Hereinafter, a process of converting and processing 2D content into 3D content will be described.

도 5는 본 발명에 따라 디지털 방송 수신기에서 2D 컨텐츠를 3D 컨텐츠로 변환하여 처리하는 과정의 일 예를 설명하기 위해 도시한 개념도이다.5 is a conceptual diagram illustrating an example of a process of converting 2D content into 3D content and processing the digital broadcast receiver according to the present invention.

2D 컨텐츠를 3D 컨텐츠로 포맷을 변환한다고 함은, 현재 3D 컨텐츠가 많이 확보되지 않은 상태에서 기존의 2D 컨텐츠를 재활용할 수 있을 뿐만 아니라, 컨텐츠의 특성 등에 따라 해당 컨텐츠의 질을 높일 수 있는 등 변환 필요성이 존재하고, 그 밖에 사용자의 요구 등에 대해 부응할 수도 있어 수신기의 성능을 제고할 수 있는 방안의 하나로 다양한 방법들이 연구되고 있다.Converting a format from 2D content to 3D content means that not only can the existing 2D content be recycled without a lot of 3D content, but also the quality of the content can be improved according to the characteristics of the content. There is a necessity, and in addition, it is possible to meet the needs of the user and various methods are being studied as one of the ways to improve the performance of the receiver.

이러한 방법들은 크게 하드웨어적으로 칩화하여 수신기 내에 별도의 구성으로 포함하여 처리하는 방법과 변환 알고리즘을 이용한 소프트웨어적으로 처리하는 방법으로 양분되어 있다. 각 방법이 서로 장단점이 있으나, 본 명세서에서는 설명의 편의상 후자의 방법을 예로 하여 설명한다. 다만, 후자의 방법을 시스템 온 어 칩(SoC)화하여 하드웨어적으로 처리할 수도 있음은 자명하다.These methods are largely divided into a method of chipping into hardware and including a separate configuration in a receiver and a software process using a conversion algorithm. Although each method has advantages and disadvantages, in the present specification, the latter method will be described as an example for convenience of description. However, it is obvious that the latter method may be processed by hardware on a system on chip (SoC).

관련하여, 2D 컨텐츠 파트에는, 이미 널리 퍼져있는 2D 비디오, 2D 애니메이션, 2D 정지 이미지와 같은 것들이 있을 수 있으며, 본 발명에 따라 2D/3D 변환을 거치면 도시된 바와 같이 대응되는 3D 컨텐츠 파트의 3D 비디오, 3D 애니메이션, 3D 정지 이미지 등으로 포맷이 변환될 것이다.In this regard, the 2D content part may include things that are already widespread, such as 2D video, 2D animation, 2D still image, and 3D video of the corresponding 3D content part as shown after 2D / 3D conversion according to the present invention. The format will be converted to 3D animation, 3D still image, etc.

변환 파트(520)는, 입력되는 2D 컨텐츠를 3D 컨텐츠로 소프트웨어적으로 변환 처리한다. 즉, 상기 변환 파트(520)는 다수 개의 프로세스(process)로 이루어진 소프트웨어 모듈(software module)이나 이하에서는 설명의 편의상 2D/3D 변환부로 지칭하여 설명한다.The conversion part 520 converts the input 2D content into 3D content in software. That is, the conversion part 520 is described as a software module composed of a plurality of processes or a 2D / 3D conversion unit for convenience of description.

도 5를 참조하면, 2D/3D 변환부(520)는 크게 3단계의 프로세스로 이루어진다.Referring to FIG. 5, the 2D / 3D converter 520 is largely composed of three steps.

제1 프로세스로, 동작 분석(Motion Analysis) 프로세스(522)가 있다. 상기 제1 프로세스에서는 입력되는 2D 컨텐츠에 대한 동작 특성을 분석한다. 상기에서, 동작 분석은 예를 들어, 프레임(frame) 단위나 미리 정해진 특정 단위로 수행될 수 있으며, 이를 위해 해당 컨텐츠에 관한 부가 정보 등이 참조될 수 있다. 여기서, 상기 부가 정보는 예를 들어, 송신부에서 해당 컨텐츠의 3D 변환을 위해 부가한 정보가 될 수 있으며, 이는 송신부에서 방송 신호를 통해 전송되는 시그널링 정보의 형태로 전송될 수도 있다.As a first process, there is a motion analysis process 522. The first process analyzes operating characteristics of the input 2D content. In the above, the motion analysis may be performed, for example, in a frame unit or a predetermined specific unit, and for this, additional information regarding the corresponding content may be referred to. Here, the additional information may be, for example, information added by the transmitter for 3D conversion of the corresponding content, which may be transmitted in the form of signaling information transmitted through a broadcast signal at the transmitter.

제2 프로세스로, 뎁쓰 추정 프로세스(2D to Depth)(Depth Estimation)(524)가 있다. 상기 제2 프로세스에서는, 전술한 제1 프로세스에서 해당 컨텐츠에 대해 분석한 동작 특성에 근거하여 최적의 3D 효과를 가지도록 깊이 정보(depth information) 즉, 뎁쓰(depth)를 추정한다. 여기서, 디지털 방송 수신기는 상기 추정되는 뎁쓰를 기초로 뎁쓰 맵(depth map)을 생성하여 저장할 수 있으며, 상기 뎁쓰 추정 프로세스(524)는 미리 저장된 뎁쓰 맵에 기초하여 추정될 수도 있다. 반대로 상기 뎁쓰 맵은 송신부를 통해 수신하여 저장하거나 이렇게 저장된 뎁쓰 맵을 이용하여 추정될 수도 있다.As a second process, there is a depth estimation process (2D to Depth) 524. In the second process, depth information, that is, depth is estimated to have an optimal 3D effect based on the operation characteristics analyzed for the corresponding content in the above-described first process. Here, the digital broadcast receiver may generate and store a depth map based on the estimated depth, and the depth estimation process 524 may be estimated based on a previously stored depth map. In contrast, the depth map may be received and stored through the transmitter or estimated using the stored depth map.

제3 프로세스로, 아웃라이닝 & 리플라잉 프로세스(2D plus Depth to 3D)(Outlining & Refling)(526)가 있다. 상기와 같이 추정된 뎁쓰를 해당 컨텐츠에 적용하는 단계이다. 이를 위해 2D 컨텐츠를 아웃라이닝(Outlining)하고 리플라잉(Refling)하여 평면적인 2D 컨텐츠에 뎁쓰를 부가하여 3D 컨텐츠로 변환한다.A third process is the Outlining & Refling 526 (2D plus Depth to 3D). The depth estimated as described above is applied to the corresponding content. To this end, the 2D content is outlined and reflipped to add a depth to the planar 2D content to convert to 3D content.

상술한 2D/3D 변환 프로세스는 일 예로 예시한 것으로, 반드시 상기한 각 프로세스가 순차적으로 모두 수행되어야만 하는 것은 아니다. 예를 들어, 필요한 경우 특정 프로세스가 더 부가되거나 상술한 프로세스 중 일부 프로세스가 생략될 수도 있다. 또한, 디지털 방송 수신기는 특정 컨텐트에 대해 포맷 변환 처리하는 경우, 각 프로세스에서 처리한 파라미터들(parameters)을 별도로 저장할 수 있다. 이 경우 실시간으로 2D 컨텐트를 3D 컨텐트로 변환하면서 시청하고 변환된 3D 컨텐트를 별도로 저장하지 않더라도 관련 파라미터들을 저장함으로써, 동일 또는 유사한 컨텐트에 대한 변환시에 유용하게 이용하여 보다 빠른 처리가 가능하다. 이러한 파라미터 정보는, 디지털 방송 수신기가 IP 네트워크와 같은 외부와 네트워크로 연결된 IPTV 수신기와 같은 기능을 포함하고 있다면, 외부로부터 수신하고 저장하여 활용할 수도 있다. 또한, 변환된 컨텐트는 사용자의 설정이나 저장 공간을 고려하여 원본 2D 컨텐트와 별개로 또는 대체 저장될 수 있다.The above-described 2D / 3D conversion process is illustrated as an example, and each of the above processes is not necessarily performed sequentially. For example, certain processes may be added, if necessary, or some of the processes described above may be omitted. In addition, when performing format conversion on a specific content, the digital broadcast receiver may separately store parameters processed by each process. In this case, by converting 2D content into 3D content in real time and watching and storing the converted 3D content separately, related parameters are stored, which is useful when converting the same or similar content, thereby enabling faster processing. Such parameter information may be received and stored from the outside if the digital broadcast receiver includes a function such as an IPTV receiver connected to an external network such as an IP network. In addition, the converted content may be stored separately or alternatively from the original 2D content in consideration of a user's setting or storage space.

디지털 방송 수신기는 상술한 변환 알고리즘에 따라 변환되는 컨텐츠를 처리함에 있어서, 해당 컨텐츠의 다양한 기능 수행을 위해 필요한 부가 정보들을 생성하여 함께 관리할 수 있다. 예를 들어, 이러한 부가 정보들로는, 스트림 인덱스(stream index), 썸네일 이미지(thumbnail image), 추가적인 정보(additional information) 등이 있을 수 있다. 또한, 상기 추가적인 정보로는, 해당 컨텐츠의 포맷 정보(format information) 예를 들어, 싱글 스트림 포맷(single stream format)인지 듀얼 스트림 포맷(dual stream format)인지 식별하는 정보를 포함할 수 있다. 여기에, 싱글 스트림 포맷인 경우에는, 사이드바이사이드 포맷, 탑/바텀 포맷, 체커 보드 포맷, 인터레이스드 포맷, 프레임 시퀀셜 포맷 등 중 어느 하나의 포맷임을 지시하는 정보를 더 포함할 수 있다. 또한, 듀얼 스트림 포맷인 경우에는, Left + Right/ Left + Delta/ Left + Depth 등 중 어느 하나의 포맷임을 지시하는 정보를 더 포함할 수 있다. 또한, 상기 추가적인 정보에는 해당 컨텐츠가 원래 2D 컨텐츠에서 3D 컨텐츠로 변환되었음을 지시하는 정보가 포함될 수 있다.
In processing the content converted according to the above-described conversion algorithm, the digital broadcast receiver may generate and manage additional information necessary for performing various functions of the corresponding content. For example, such additional information may include a stream index, a thumbnail image, additional information, and the like. In addition, the additional information may include format information of the corresponding content, for example, information identifying whether a single stream format or a dual stream format. In the case of the single stream format, information indicating one of a side by side format, a top / bottom format, a checker board format, an interlaced format, and a frame sequential format may be further included. In addition, in the case of the dual stream format, the terminal may further include information indicating one of left, right, left, delta, left, and depth formats. In addition, the additional information may include information indicating that the corresponding content is converted from the original 2D content to 3D content.

3D 타임 3D time 머신machine 기능 function

상술한 2D/3D 변환은, 사용자에 디지털 방송 수신기에 대한 효용을 더욱 높일 수 있다. 예를 들어, 디지털 방송 수신기는 사용자의 선택에 따라 실시간 또는 비실시간으로 포맷 변환을 처리할 수 있다. 또한, 이러한 포맷 변환은, 디지털 방송 수신기가 타임머신 기능을 포함한 경우에는, 해당 컨텐츠 뿐만 아니라 해당 컨텐츠 내 특정 구간 단위로도 가능하다.The above-described 2D / 3D conversion can further enhance the utility of the digital broadcasting receiver to the user. For example, the digital broadcast receiver may process the format conversion in real time or non-real time according to a user's selection. In addition, when the digital broadcast receiver includes a time machine function, such a format conversion may be performed not only in the corresponding content but also in a specific section unit within the corresponding content.

이하에서는 이러한 예로, 3D 타임 머신 기능에 대해 아래 표 1을 참조하여 기술한다. 후술하는 각 기능 수행시 사용자의 선택에 따라 해당 컨텐츠를 제어하여 해당 컨텐츠 자체 또는 특정 단위의 구간에 대해 3D 포맷 변환이 동시에 수행될 수 있다.In the following, for example, the 3D time machine function will be described with reference to Table 1 below. When performing the following functions, the 3D format conversion may be simultaneously performed on the corresponding content itself or a section of a specific unit by controlling the corresponding content according to a user's selection.

기능function 설명Explanation 비고Remarks 녹화recording 즉시 녹화Instant recording 시청 중인 화면 즉시 녹화Instantly record what you're watching 녹화시간 설정Record time setting 예약 녹화Scheduled recording EPG 에서 선택Choose from EPG HDD 공간 표시HDD space indication Usage Indicator : HD, SD, 3DUsage Indicator: HD, SD, 3D 3D 추가Add 3D 메시지 출력Message output Warning MessageWarning Message Watch & RecordWatch & Record 채널A를 보면서 채널 B를 녹화 (Dual Tuner/ IPTV)Record channel B while watching channel A (Dual Tuner / IPTV) 간편 설정 UIQuick Setup UI Play & RecordPlay & Record 녹화된 Content를 보면서 A 채널(또는 Content ) 녹화Record A channel (or Content) while viewing recorded content Play & 2D to 3D ConversionPlay & 2D to 3D Conversion Content를 보면서 선택된 2D-to- 3D 변환 저장Save selected 2D-to-3D transformation while viewing content 3D Dual Mode 추가3D Dual Mode added PlayPlay 녹화물 재생Play recording Content list 에서 선택하여 재생Play by selecting from the content list 일시 정지Pause 일시 정지Pause Fast ForwardFast forward X2, x5, x20, x50, x300X2, x5, x20, x50, x300 Fast BackwardFast backward X2, x5, x20, x50, x300X2, x5, x20, x50, x300 재생 속도 조정Adjust playback speed 1/21/2 Forward SkipForward Skip Progress bar 로 이동Go to the progress bar Backward SkipBackward skip Progress bar 로 이동Go to the progress bar Time shiftTime shift DefaultDefault 항상 time shiftAlways time shift User 선택User selection User 필요 시 time shift onUser needs time shift on RepeatRepeat 선택한 구간 RepeatSelected Section Repeat PIPPIP PIP 위치 선정PIP Positioning PIP 위치 상,하,좌,우PIP Position Up, Down, Left, Right PIP size 변경Change PIP size PIP size 변경Change PIP size PIP 주부 절환PIP Housewife Switching Main 화면과 Sub 화면 전환Switch between Main and Sub screens 검색 기능Search function 장르, 시리즈, 스포츠 종목, etc.Genre, series, sport event, etc Split ScreenSplit screen 2개 화면 분할2 screen splits

디지털 방송 수신기는 본 발명에 따라 표 1에 도시된 바와 같이, 3D 타임 머신 기능을 수행할 수 있다. 여기서, 상기 3D 타임 머신 기능에는, 녹화 기능, 시청 & 기록 기능, 재생 & 기록 기능, 재생 & 2D/3D 변환 기능, 재생 기능, 타임 쉬프트(time-shift) 기능, 반복 기능, PIP(Picture In Picture) 기능, 검색 기능 및 스플리트 스크린(Split Screen) 기능 등이 포함된다. 또한, 각 기능들은 본 발명과 관련하여, 실시간 또는 비실시간으로 2D 컨텐츠에 대한 3D 컨텐츠로의 변환 처리도 포함된다.The digital broadcast receiver may perform a 3D time machine function as shown in Table 1 according to the present invention. Here, the 3D time machine function includes a recording function, a viewing function & a recording function, a playback & recording function, a playback & 2D / 3D conversion function, a playback function, a time-shift function, a repeat function and a picture in picture ), Search, and split screen functions. In addition, each function also includes a process of converting 2D content into 3D content in real time or non-real time in relation to the present invention.

녹화 기능에는, 즉시 녹화(instant recording) 기능, 예약 녹화(reservation recording) 기능, HDD(Hard Disc Drive) 공간 표시 기능, 녹화 시간 충돌 알림 기능 등이 포함된다. 상기 즉시 녹화 기능은, 현재 시청 중인 화면을 즉시 녹화하도록 제어하는 기능으로, 필요한 경우 녹화 시간(recording time)을 부가로 설정할 수도 있다. 상기 예약 녹화 기능은, 전자 프로그램 가이드(EPG: Electronic Programme Guide) 등을 통해 선택된 컨텐츠에 대한 예약 녹화 기능으로, 이 경우 EPG 등을 참조하여 상기 선택된 컨텐츠의 방송 시간에 해당 컨텐츠를 녹화한다. 상기 HDD 공간 표시 기능은, 타임 머신 기능 수행에 이용되는 HDD의 공간에 대한 다양한 정보를 제공한다. 예를 들어, HDD 공간의 총 저장 공간, 현재 이용 가능한 저장 공간, 이용 인디케이터(Usage Indicator)에 근거한 카테고리별 저장 공간 및 해당 저장 공간 내 현재 이용 가능한 저장 공간 등에 대한 정보가 포함될 수 있다. 또한, 상기에서 카테고리(category)라 함은 다양한 기준 예를 들어, 사용자의 설정이나 디폴트로 설정된 바에 따라 정의될 수 있으며, 그러한 예로 HD, SD, 3D, 2D, 2D/3D 변환 등으로 구분하여 각각에 대해 현재 이용중인 저장 공간에 대한 정보와 가용 저장 공간 등에 대한 정보를 정의할 수 있다. 상기 메시지 출력 기능은, OSD 데이터나 UI를 별도로 구성하여 녹화와 관련하여 필요한 메시지가 있는 경우 출력하는 기능을 말한다. 이러한 메시지로는 예를 들어, 선택되는 녹화 시간이 서로 충돌하는 경우 경고 메시지(Warning Message), 저장 공간이 부족한 경우에 경고 메시지, 녹화되는 컨텐츠의 저장 공간 선택을 위해 필요한 메시지 등 상기 녹화와 관련된 다양한 메시지가 모두 포함될 수 있다.The recording function includes an instant recording function, a reservation recording function, a hard disc drive (HDD) space display function, a recording time conflict notification function, and the like. The instant recording function is a function of controlling to immediately record a screen currently being viewed, and may additionally set a recording time if necessary. The reservation recording function is a reservation recording function for content selected through an electronic program guide (EPG). In this case, the content is recorded at the broadcast time of the selected content with reference to the EPG. The HDD space display function provides various information about the space of the HDD used to perform the time machine function. For example, information about a total storage space of the HDD space, a currently available storage space, a storage space for each category based on a usage indicator, and a storage space currently available in the storage space may be included. In addition, the category (category) in the above may be defined according to various criteria, for example, as set by the user's settings or default, for example, such as HD, SD, 3D, 2D, 2D / 3D conversion, respectively Information about the currently used storage space and available storage space can be defined for. The message output function refers to a function of separately configuring OSD data or UI and outputting a message required for recording. Such messages include, for example, a warning message when the recording times selected are in conflict with each other, a warning message when the storage space is insufficient, a message required for selecting a storage space of the recorded content, and the like. All messages can be included.

시청 & 녹화 기능은 예를 들어, 채널 A를 보면서 채널 B를 녹화하는 것을 말한다. 이러한 경우 수신기는 IPTV나 다수 개의 튜너가 구비되어야 할 것이다.The viewing & recording function refers to recording channel B while watching channel A, for example. In this case, the receiver will have to be equipped with IPTV or multiple tuners.

재생 & 녹화 기능은 예를 들어, 기 녹화된 컨텐츠를 재생하면서 특정 채널 또는 상기 컨텐츠와 다른 컨텐츠를 녹화하는 것을 말한다.For example, the playback & recording function refers to recording a specific channel or other content different from the content while playing back pre-recorded content.

재생 & 2D/3D 변환 기능은 예를 들어, 컨텐츠를 재생하면서 해당 컨텐츠를 2D/3D로 변환하여 저장하는 것을 말한다. 이 경우 3D 듀얼 모드가 추가될 수 있다. 상기 기능은 다양하게 아래와 같이 다양하게 구분할 수 있다. 예를 들어, 실시간으로 입력되거나 기 저장된 2D 컨텐츠를 실시간으로 2D/3D 변환하면서 재생, 상기 재생 후 저장, 실시간으로 재생된 2D 컨텐츠의 재생 후 2D/3D 변환하여 저장, 해당 컨텐츠 전부를 2D/3D 변환/저장, 그리고 해당 컨텐츠 중 선택된 일부분만을 상기와 같이 실시간 또는 비실시간으로 2D/3D 변환/저장하는 경우 중 적어도 어느 하나 이상으로 기능할 수 있다. 상기에서 선택된 일 부분은 예를 들어, 프레임 단위일 수 있으며 이는 사용자의 선택에 의해 결정될 수 있다.The playback & 2D / 3D conversion function refers to, for example, converting the content into 2D / 3D and storing the content while playing the content. In this case, 3D dual mode may be added. The function can be variously divided as follows. For example, 2D / 3D conversion of 2D content input or pre-stored in real time in real time, the playback after the playback, 2D / 3D conversion after the playback of the 2D content played in real time, and stores all of the corresponding content 2D / 3D At least one of the conversion / storage and 2D / 3D conversion / storage of the selected content in real time or non-real time as described above may be used. The selected part may be, for example, a frame unit, which may be determined by a user's selection.

재생 기능은, 녹화물 재생 기능, 일시 정지 기능, 순방향 빠른 감기(Fast Forward) 기능, 역방향 빨리 감기(Fast Backward) 기능, 재생 속도 조정 기능, 순방향 스킵(Forward Skip) 기능 및 역방향 스킵(Backward Skip) 기능이 포함될 수 있다. 상기에서 녹화물 재생 기능은 예를 들어, 녹화 컨텐츠 리스트가 출력되고 출력된 리스트에서 선택된 컨텐츠를 재생하는 기능으로, 이러한 녹화 컨텐츠 리스트에는 본 발명과 관련하여, 2D 컨텐츠, 3D 컨텐츠와 함께 2D/3D 변환된 컨텐츠도 구분하여 제공될 수 있다.Playback function includes playback of recordings, pause function, fast forward function, fast forward function, playback speed adjustment function, forward skip function and backward skip function. This may be included. In the above, the recording playback function is, for example, a function of outputting a list of recorded contents and playing a selected content from the outputted list. In the present invention, the recorded contents list is converted to 2D / 3D together with 2D content and 3D content. The content may also be provided separately.

순방향 빨리 감기 기능과 역방향 빨리 감기 기능은 예를 들어, 2배속, 5배속, 20배속, 50배속, 300배속으로 순방향 또는 역방향으로 감기 기능을 수행한다. 필요한 경우 사용자의 설정이나 제어에 따른 배속으로 순방향 또는 역방으로 감기 기능을 수행할 수도 있다.The forward fast forwarding function and the reverse fast forwarding function perform forward or reverse forward functions at, for example, 2 times, 5 times, 20 times, 50 times, and 300 times. If necessary, forward or reverse can be performed at double speed according to user's setting or control.

재생 속도 조절 기능은 예를 들어, 미리 설정되거나 사용자의 입력에 따른 재생 속도에 따라 컨텐츠를 재생하는 것을 말한다. 예를 들어, 0.5배속 재생, 2배속, 3배속 등이 있을 수 있다.The playback speed adjustment function refers to playing content according to a playback speed set in advance or according to a user input. For example, there may be 0.5 times reproduction, 2 times, 3 times, and the like.

순방향 스킵 기능 또는 역방향 스킵 기능은 예를 들어, 미리 설정되거나 사용자의 입력에 따라 현재 위치로부터 특정 위치로 이동 또는 스킵하는 것을 말한다. 이 경우 사용자는 프로그레스 바를 통해 원하는 위치를 설정할 수 있다.The forward skip function or the reverse skip function refers to moving or skipping from a current position to a specific position, for example, according to a preset or user input. In this case, the user can set the desired position through the progress bar.

그 밖에 재생 기능에 포함되거나 별도의 기능으로 북마크 기능이 있을 수 있다. 상기 북마크 기능은 재생되는 컨텐츠 중 사용자의 입력에 따른 (하나 또는 그 이상의 연속적이거나 단속적인)프레임에 대해 북마크를 표시하는 것을 말한다. 이 경우 별도의 북마크 리스트를 구성하여 제공하거나 프로그레스 바 상에 표시하여 제공할 수도 있다. 또한, 사용자 등의 입력이나 설정에 따라 북마크된 프레임(들)에 대한 정보를 부가로 정의할 수도 있다. 이렇게 제공된 북마크가 선택되면, 수신기는 해당 북마크에 대한 정보를 제공하고 해당 북마크의 위치로 이동할 수 있다.In addition, there may be a bookmark function included in the playback function or as a separate function. The bookmark function refers to displaying a bookmark for a frame (one or more continuous or intermittent) frames according to a user's input among contents to be played. In this case, a separate bookmark list may be provided or provided on the progress bar. In addition, information about the bookmarked frame (s) may be additionally defined according to an input or setting of a user. When the bookmark thus provided is selected, the receiver may provide information about the bookmark and move to the location of the bookmark.

타임쉬프트 기능에는 예를 들어, 디폴트 기능과 사용자 선택 기능이 포함될 수 있다. 상기 디폴트 기능은 항상 타임 쉬프트를 하도록 하는 것을 말하고, 사용자 선택 기능은 사용자의 필요에 따라 선택된 경우에만 타임 쉬프트를 하도록 하는 것을 말한다.The time shift function may include, for example, a default function and a user selection function. The default function refers to always time shifting, and the user selection function refers to time shifting only when selected according to a user's needs.

반복 기능은 예를 들어, 해당 컨텐츠의 전체 반복 기능 및 선택된 구간의 반복 기능을 포함할 수 있다. 또한, 상기 반복 기능에는 사용자 등의 입력 및 설정 등에 따라 1회 또는 다수 회 반복 기능도 설정할 수 있다.The repeating function may include, for example, an entire repeating function of the corresponding content and a repeating function of the selected section. In addition, the repetition function may also be set once or multiple times depending on the input and setting of the user.

PIP(Picture In Picture) 기능에는 예를 들어, PIP 위치 선정 기능, PIP 사이즈 변경 기능 및 PIP 주부 절환 기능이 포함될 수 있다. 상기 PIP 위치 선정 기능은, PIP로 제공되는 화면의 주화면 내 위치를 제어할 수 있는 기능으로 디폴트 위치로부터 상, 하, 좌, 우로 이동이 가능하며, 설정에 따라 상, 하, 좌, 우 이동시 한 번에 특정 위치로 이동되거나, 단계별로 이동될 수도 있다. 상기 PIP 사이즈 변경 기능은, PIP로 제공되는 화면의 사이즈를 디폴트 사이즈(default size)로부터 크게 또는 적게 변경할 수 있는 기능으로, 설정에 따라 미리 정해진 만큼 순차로 변경될 수도 있으며, 변경될 크기를 입력받아 한 번에 변경될 수도 있다. 또한, PIP 사이즈 변경시 예를 들어, PIP 사이즈가 주 화면의 1/2 이상의 크기로 변경 요청이 되면, 주 화면(main picture)과 부 화면(sub picture)이 절환(change)되도록 설정될 수도 있다. 상기 PIP 주부 절환 기능은, 주 화면과 부 화면 즉, PIP 화면의 주/부가 전환하는 기능을 말한다.The Picture In Picture (PIP) function may include, for example, a PIP positioning function, a PIP resizing function, and a PIP housewife switching function. The PIP position selection function is a function for controlling the position of the main screen of the screen provided by the PIP, and can be moved up, down, left, and right from the default position. It may be moved to a specific position at a time, or may be moved step by step. The PIP size changing function is a function to change the size of the screen provided by the PIP to be larger or smaller from the default size, and may be sequentially changed by a predetermined amount according to a setting. It may be changed at one time. In addition, when the PIP size is changed, for example, when the PIP size is requested to be changed to the size of 1/2 or more of the main screen, the main picture and the sub picture may be set to be changed. . The PIP housewife switching function refers to a function of switching between main / sub screens, that is, main / sub switching of the PIP screen.

검색 기능은, 타임 머신 기능을 적용할 컨텐츠들에 대한 검색을 위한 것으로, 이러한 검색은 장르(genre), 시리즈(series), 재생 시간(playback time), 포맷(format) 등 다양한 기준에 따라 이루어질 수 있다. 예를 들어, 포맷의 경우, 2D 컨텐츠, 3D 컨텐츠, 2D에서 3D로 포맷 변환된 컨텐츠를 구분하여 검색할 수 있을 것이다.The search function is for searching for contents to which the time machine function is applied. Such a search may be performed according to various criteria such as genre, series, playback time, format, and the like. have. For example, in the case of a format, 2D content, 3D content, and content converted from 2D to 3D format may be classified and searched.

그 밖에 스플리트 스크린 기능은, 2개의 화면을 분할(divide)하는 것을 말한다.
In addition, the split screen function refers to splitting two screens.

관련하여, 도 6은 본 발명에 따라 3D 타임머신 기능 구현을 위한 디지털 방송 수신기 내 구성 블록도이다.6 is a block diagram of a digital broadcast receiver for implementing a 3D time machine function according to the present invention.

도 6을 참조하면, 디지털 방송 수신기에서 3D 타임머신 기능을 구현하는 과정에서 2D/3D 변환 처리 과정은 크게 실시간으로 변환 처리하는 것과 비실시간으로 변환 처리하는 경우로 나누어진다.Referring to FIG. 6, in the process of implementing the 3D time machine function in the digital broadcasting receiver, the 2D / 3D conversion process is divided into a real time conversion process and a non-real time conversion process.

먼저, 실시간으로 처리하는 프로세스는, 2D 스트림 매니저(602), 2D/3D 스트림 변환(603), 3D 스트림 매니저(604)를 거쳐 출력이 되거나 레코드 매니저(605)를 거쳐 저장부에 저장(609)이 된다. 이에 반해, 2D 스트림 매니저(602)와 레코드 매니저(605)를 거쳐 저장부(609)에 저장된 재가공 2D 스트림이 2D/3D 스트림 변환부(606)을 거쳐 3D 스트림 매니저(604)를 거쳐 다시 레코드 매니저(605)를 거쳐 3D 스트림으로 저장부(609)에 저장된다.First, the process of processing in real time is output via the 2D stream manager 602, the 2D / 3D stream conversion 603, the 3D stream manager 604, or stored in the storage via the record manager 605 (609). Becomes In contrast, the reprocessed 2D stream stored in the storage unit 609 via the 2D stream manager 602 and the record manager 605 via the 2D / 3D stream converter 606 and the 3D stream manager 604 again through the record manager. 605 is stored in the storage unit 609 as a 3D stream.

이하에서는 각 구성의 기능에 대해 설명하면, 다음과 같다.Hereinafter, the function of each configuration will be described.

2D 스트림 매니저(602)는, 입력되는 2D 스트림을 DVR 동작을 위한 형태로 재가공(Redefined)한다. 이때, 2D 스트림 매니저(602)는 재가공되는 2D 스트림과 관련하여, 스트림 인덱스(Stream Index), 썸네일(Thumbnail) 및 스트림 정보(Stream Information) 중 적어도 하나 이상을 생성한다. 또한, 상기에서 2D 스트림 매니저(602)는 MPEG 인코더(601)를 통해 수신된 아날로그 소스(analog source)를 재가공할 수 있으며, 2D 디지털 소스를 지상파, 케이블, 위성, IP 매체를 통해 안테나나 네트워크 인터페이스에서 수신하여 이를 재가공할 수 있다.The 2D stream manager 602 reprocesses the input 2D stream into a form for DVR operation. In this case, the 2D stream manager 602 generates at least one of a stream index, a thumbnail, and stream information in relation to the 2D stream to be reprocessed. In addition, the 2D stream manager 602 may reprocess an analog source received through the MPEG encoder 601, and the 2D digital source may be an antenna or a network interface through a terrestrial wave, a cable, a satellite, or an IP medium. It can be received by and reprocessed.

2D/3D 변환부(603/606)는, 재가공된 2D 스트림을 수신하여 3D 스트림으로 변환한다. 여기서, 상기 변환은 예를 들어, 상술한 변환 알고리즘에 따를 수 있다. 이 경우 실시간 또는 비실시간 변환(Post Conversion)이 모두 가능하다.The 2D / 3D converter 603/606 receives the reprocessed 2D stream and converts it into a 3D stream. Here, the conversion may be, for example, according to the above-described conversion algorithm. In this case, both real-time or non-real-time conversion is possible.

3D 스트림 매니저(604)는, 변환된 3D 스트림을 저장부(609)에 저장하거나 다음 단으로 출력한다.The 3D stream manager 604 stores the converted 3D stream in the storage 609 or outputs the next stage.

레코드 매니저(605)는, 2D 스트림 매니저(602)에서 생성된 스트림 인덱스, 썸네일, 스트림 정보를 수신하여 DVR 동작을 위한 적절한 형태로 분할, 삭제, 합병 및 변환 등을 하여 최적의 조건으로 저장부(609)에 저장한다.The record manager 605 receives stream indexes, thumbnails, and stream information generated by the 2D stream manager 602 and divides, deletes, merges, and converts the data into an appropriate form for the DVR operation. 609).

저장 매니저(607)는 저장부(609)의 파일 시스템 운용, 무결성 검사, 주기적 용량 검사 등의 작업을 한다.The storage manager 607 performs operations such as file system operation, integrity check, and periodic capacity check of the storage unit 609.

컨텐츠 매니저(608)는 저장부(609)에 저장된 스트림 인덱스, 썸네일, 스트림 정보 등의 컨텐츠 편집 기능, 데이터베이스를 이용한 컨텐츠 서치(Contents Search)/목록 구성 기능 등을 한다.The content manager 608 performs a content editing function such as a stream index, thumbnail, and stream information stored in the storage 609, a content search / list structure function using a database, and the like.

스트림 업로드 매니저(Stream Upload Manager)(610)는, 저장부(609)에 저장된 스트림 인덱스, 썸네일, 스트림 정보 등을 이용하여 재생(playback), 트릭 플레이(trick play) 등의 기능을 한다.The stream upload manager 610 performs functions such as playback and trick play using the stream index, thumbnail, stream information, and the like stored in the storage unit 609.

상기에서 스트림 인덱스는, 스트림을 구성하는 모든 픽쳐(picture)에 대한 DVR 부가 정보로서, 픽쳐 타입(picture type), 스트림 오프셋(stream offset), 픽쳐 특성 등의 정보를 포함할 수 있다. 썸네일은, 스트림의 정지 영상(still picture)를 보다 작은 크기로 축소한 이미지로서 스트림 내 추출 위치 및 부가 정보를 포함할 수 있다. 스트림 정보는, 스트림 재생 및 시간, 크기 등 DVR 동작을 위한 모든 부가 정보를 포함할 수 있다.In the above, the stream index is DVR additional information for all pictures constituting the stream, and may include information such as a picture type, a stream offset, a picture characteristic, and the like. The thumbnail is an image obtained by reducing a still picture of the stream to a smaller size and may include an extraction position and additional information in the stream. The stream information may include all additional information for DVR operation such as stream playback and time and size.

도 6을 참조하여 사용 시나리오들을 설명하면, 2D 스트림을 소비자의 선택에 따라 3D 영상으로 변화하여 저장하고 녹화 리스트(Record List)에 효과적으로 표시하는 PVR 기능 적용할 수 있고, 3D 컨텐츠의 변환 상태를 LED 컬러로 표시할 수 있다. 이 경우 변환 중인 경우에는 노란색(Yellow), 변환이 완료된 경우에는 녹색(Green), 변환 중 문제가 생긴 경우에는 빨간색(Red) 등으로 표시할 수 있다. 또한, 입력 및 저장되는 컨텐츠를 종류별로 구분하여 저장하고, 이를 녹화 리스트 상에서 전형적인 2D 컨텐츠, 2D/3D 변환된 컨텐츠, 전형적인 3D 컨텐츠로 리스트 업(List-up)하여 구분되도록 표시하여 사용자에게 제공할 수도 있다. 이 경우 리스트-업 된 3D 컨텐츠의 재생 메뉴 바(Playback Menu Bar)는 3D UI 효과를 추가하여 실감형 입체 효과를 줄 수 있도록 구성할 수도 있다. PVR 관리 프로세스의 경우에도, 2D와 3D 스트림을 녹화, 저장, 컨텐츠 제어 등으로 구분하여 관리할 수 있으며, 2D와 3D 컨텐츠의 디스플레이를 위한 스트리밍 프로세스는, 상기 2D 스트림 매니저에서 생성된 스트림 인덱스, 썸네일, 재가공된 2D, 3D 스트림, 부가적인 스트림 정보를 가지고 스트림 업로드 매니저(610)에서 수행될 수 있다. 그 밖에 DVR Ready 기능을 지원하기 위해, 외장 저장 장치(External HDD), 휴대용 메모리 스틱(USB Memory Stick) 등을 이용하여 PC, LED/LCD/PDP 모니터 및/또는 TV, Projector 등 다양한 디스플레이 기기에서도 동작되도록 지원할 수 있다.
Referring to FIG. 6, the usage scenarios will be described. A PVR function of converting and storing a 2D stream into a 3D image according to a consumer's selection and effectively displaying it on a record list may be applied, and the conversion state of the 3D content may be LED. Can be displayed in color. In this case, it may be displayed in yellow when the conversion is in progress, green when the conversion is completed, or red when a problem occurs during the conversion. In addition, the input and stored content is classified and stored according to the type, and this is displayed on the recording list to be divided into a list of typical 2D content, 2D / 3D converted content, and typical 3D content to be displayed to the user. It may be. In this case, the playback menu bar of the list-up 3D content may be configured to add a 3D UI effect to give a realistic stereoscopic effect. In the case of the PVR management process, the 2D and 3D streams can be managed by recording, storing, and controlling content, and the streaming process for displaying 2D and 3D content is performed by the stream index and thumbnail generated by the 2D stream manager. The stream upload manager 610 may perform the reprocessed 2D, 3D stream, and additional stream information. In addition, to support DVR Ready function, it works on various display devices such as PC, LED / LCD / PDP monitor and / or TV, Projector using external HDD, USB memory stick, etc. Can be supported.

UIUI 제공 방법 How to Provide

도 7은 본 발명에 따라 3D 컨텐츠에 대한 3D UI를 추가한 일 실시예를 도시한 것이고, 도 8은 도 7에서 썸네일과 관련된 3D UI를 보다 상세하게 설명하기 위해 도시한 것이다.FIG. 7 illustrates an embodiment in which a 3D UI is added for 3D content according to the present invention, and FIG. 8 illustrates a 3D UI related to a thumbnail in FIG. 7 in more detail.

도 7과 8은 종래 디지털 방송 수신기가 2D 컨텐츠에 대해 제공하던 UI와 달리 2D 컨텐츠, 3D 컨텐츠 및 2D/3D 변환된 컨텐츠에 대한 적절한 UI를 제공하기 위한 UI 표시들의 예시이다.7 and 8 are examples of UI displays for providing an appropriate UI for 2D content, 3D content, and 2D / 3D converted content, unlike the UI provided by the conventional digital broadcasting receiver for 2D content.

도 7을 보면, 3D 컨텐츠에 대한 3D UI를 추가한 대표적인 몇 가지 예를 도시하였다. 그 예로, 썸네일 이미지, 프로그레스 바, 메모리 여유 공간 표시 및 북 마크를 예시하였다. 이하 각각에서 3D UI를 포함하는 것에 대해 설명하면, 다음과 같다.Referring to FIG. 7, some representative examples of adding a 3D UI for 3D content are illustrated. For example, thumbnail images, progress bars, memory free space indications and book marks are illustrated. Hereinafter, each of which includes the 3D UI will be described.

썸네일 이미지는 예를 들어, 도 5의 3D 스트림 매니저()에서 생성된 썸네일 이미지를 사용할 수 있다. 이에 대한 보다 상세한 설명은 후술한다.For example, the thumbnail image may use a thumbnail image generated by the 3D stream manager () of FIG. 5. A more detailed description thereof will be described later.

프로그레스 바는, 재생되는 컨텐츠가 전형적인 3D 컨텐츠이거나 2D 스트림에서 3D 스트림으로 변환되어 재생되는 3D 컨텐츠인 경우에는 그에 맞게 3D로 구성하여 제공한다. 이 경우 3D로 구성된 프로그레스 바는 미리 제작되어 저장부에 저장되어 있는 것이 바람직하다. 도 7에서 프로그레스 바에서 1은 재생 모드임을 지칭하고, 2는 현재 재생중인 위치를 표시하고, 3은 컨텐츠 시작 시간을, 4는 해당 컨텐츠에 대한 경과 시간을 지시하며, 5는 사용자의 설정에 따라 북마크되었음을 지시하고, 마지막으로 6은 컨텐츠의 종료 시간을 지시한다.When the content to be played is typical 3D content or 3D content that is converted from a 2D stream to a 3D stream and played back, the progress bar is configured in 3D accordingly. In this case, the progress bar composed of 3D is preferably manufactured in advance and stored in the storage unit. In FIG. 7, in the progress bar, 1 indicates a playback mode, 2 indicates a current playing position, 3 indicates a content start time, 4 indicates an elapsed time for the corresponding content, and 5 indicates a user's setting. According to the bookmark, and finally 6 indicates the end time of the content.

메모리 여유 공간 표시와 관련하여, 타임머신 기능이나 PVR 기능을 구현하기 위해서는 기본적으로 디지털 방송 수신기는 하드디스크(HDD)를 구비하고 있어야 한다. 이러한 하드디스크 즉, 메모리의 여유 공간에 대한 정보 제공은 사용자의 요청에 따른 녹화 기능이나 타임머신 기능 등을 수행하는 경우 해당 기능의 원활한 동작을 위해 정확한 정보가 제공되어야 한다. 이러한 메모리 여유 공간에 대한 정보를 제공하는 것과 관련하여, 종래에는 HD와 SD 컨텐츠에 대한 녹화 가능 시간을 제공하는 것이 전부였다. 본 발명에서는 이러한 HD와 SD 컨텐츠 외에 3D 컨텐츠에 대한 녹화 가능 시간도 표시하고자 한다. 여기서, 상기 3D 컨텐츠는 전형적인 3D 컨텐츠를 의미하거나 2D에서 3D로 변환된 3D 컨텐츠도 포함될 수 있다. 또는 전형적인 3D 컨텐츠와 별개로 2D에서 3D로 변환된 3D 컨텐츠만을 별개로 하여 녹화 가능 시간을 제공할 수도 있다.Regarding the display of the free memory space, in order to implement the time machine function or the PVR function, the digital broadcast receiver should basically have a hard disk (HDD). When providing information on the free space of the hard disk, that is, the memory, when performing a recording function or a time machine function according to a user's request, accurate information must be provided for smooth operation of the corresponding function. Regarding providing information about such free memory space, it has conventionally been only to provide recordable time for HD and SD contents. In the present invention, it is intended to display the recordable time for the 3D content in addition to the HD and SD content. Here, the 3D content may mean a typical 3D content or may also include 3D content converted from 2D to 3D. Alternatively, it is possible to provide a recordable time separately from 3D contents converted from 2D to 3D separately from typical 3D contents.

관련하여, 본 발명에서는 DVR-Ready 기능 수행을 위해 외장 하드, USB 메모리 스틱과 같은 외부 저장 장치가 연결되는 경우 연결된 외부 저장 장치의 메모리 여유 공간도 표시하여 사용자에게 제공할 수도 있다. 왜냐하면, 필요에 따라 디지털 방송 수신기의 컨텐츠를 외부 저장 장치로 복사, 이동 등을 할 수도 있기 때문에 이러한 정보를 제공함으로써 사용자의 편의를 도모할 수 있다. 이 경우도 상술한 바와 같이, SD/HD 뿐만 아니라 3D 컨텐츠에 대한 정보도 제공하는 것이 바람직하다.In this regard, in the present invention, when an external storage device such as an external hard drive or a USB memory stick is connected to perform a DVR-Ready function, the memory free space of the connected external storage device may also be displayed and provided to the user. This is because the contents of the digital broadcast receiver can be copied or moved to an external storage device as necessary, so that the user can be provided by providing such information. In this case, as described above, it is preferable to provide not only SD / HD but also information on 3D content.

북마크 표시와 관련하여, 다양한 형태로 사용자의 요청에 따른 북마크 표시를 제공할 수 있다. 도 7에서는 그러한 예시로 프로그레스 바 내에 북마크 포인트를 제공하는 것을 예로 하였다. 이 경우 디지털 방송 수신기는 상기 프로그레스 바 등에 따라 북마크 표시된 경우에는 날짜, 시간, 컨텐츠 별로 북마크된 내용들만을 별도로 목록화하여 사용자에게 제공할 수 있다. 또한, 본 발명에서는 사용자의 요청에 따라 북마크 목록을 제공하고, 사용자가 북마크 목록 내 다수의 북마크 내용들 중 특정 북마크를 선택하는 경우에는 북마크된 내용에 대한 정지 영상과 함께 부가 정보(사용자 코멘트 포함)를 제공할 수 있으며, 그 상태에서 재생 요청이 수신되면, 저장부로부터 해당 정지 영상을 포함하는 컨텐츠를 상기 정지 영상 이후부터 재생되도록 구성할 수도 있다. 또한, 북마크가 존재하는 컨텐츠는 기본적으로 사용자에 의해 재생되었을 가능성이 크므로, 해당 컨텐츠의 재생 요청시 디지털 방송 수신기는 해당 컨텐츠에서 다수 개의 북마크가 존재하면, 이를 별도의 UI로 구성하여 제공하거나 또는 프로그레스 바에 표시하여 사용자의 접근 편리성을 추구할 수도 있다. In relation to the bookmark display, a bookmark display according to a user's request may be provided in various forms. 7 exemplarily provides a bookmark point in the progress bar. In this case, when the bookmark is displayed according to the progress bar or the like, the digital broadcast receiver may separately provide only the bookmarked contents by date, time, and content to the user. In addition, the present invention provides a bookmark list according to a user's request, and when the user selects a specific bookmark among a plurality of bookmark contents in the bookmark list, additional information (including user comments) along with a still image of the bookmarked contents is provided. When the playback request is received in the state, the content including the corresponding still image may be played back from the storage after the still image. In addition, since the content in which the bookmark exists is likely to be basically played by the user, the digital broadcasting receiver may provide a separate UI when a plurality of bookmarks exist in the corresponding content when a request for playing the corresponding content exists. It can also be displayed on the progress bar to seek user convenience.

이상 상술한 내용들은 별도의 언급이 없더라도 전형적인 3D 컨텐츠나 2D에서 3D로 변환된 컨텐츠의 경우에는, 제공되는 각 정보들이 3D로 구성되어 제공될 수도 있다.Although the above descriptions are not mentioned otherwise, in the case of typical 3D content or 2D to 3D converted content, each of the provided information may be provided in 3D.

도 8에서는 특히, 사용자의 요청에 따라 녹화 목록(800)을 본 발명에 따라 제공하는 일 예를 도시한 것으로, 제공되는 녹화 목록(800)에 대해 설명의 편의상 4부분으로 구분하여 설명한다.In particular, FIG. 8 illustrates an example in which the recording list 800 is provided according to the present invention according to a user's request. The recording list 800 is divided into four parts for convenience of description.

우선 녹화 목록(800)의 최상위 계층(801)은 저장 공간 여유 표시(805)를 나타내고 있다. First, the top layer 801 of the recording list 800 shows the storage space free indication 805.

도 8에서는 "Available Time: HD 01:10/SD 02:16/3D 00:45"와 같이 표시하여, HD는 1시간 10분 분량, SD는 2시간 16분 분량 그리고 3D는 45분 분량을 저장할 수 있는 여유 공간이 저장 공간 내에 남았음을 표시하고 있다. 전술한 바와 같이, 상기 3D에는 전형적인 3D 컨텐츠 외에 2D에서 3D로 변환된 컨텐츠에 대한 저장 공간도 모두 포함되는 것으로 볼 수도 있으며, 별도로 "Available Time: HD 01:10/SD 02:16/3D 00:45/2D-3D 01:00"와 같이 표시할 수도 있다. 또한, 그 아래에는 프로그레스 바를 제공하여 SD, HD, 3D 및 2D-3D 선택시 저장 공간 내 여유 공간을 그래픽 형태로 제공할 수도 있다.In FIG. 8, "Available Time: HD 01: 10 / SD 02: 16 / 3D 00:45" is displayed, where HD is 1 hour 10 minutes, SD is 2 hours 16 minutes, and 3D is 45 minutes. It indicates that there is enough free space left in the storage space. As described above, the 3D may include all the storage space for the content converted from 2D to 3D in addition to the typical 3D content, separately, "Available Time: HD 01: 10 / SD 02: 16 / 3D 00: 45 / 2D-3D 01:00 ". In addition, a progress bar can be provided below to provide free space in the storage space in the form of graphics when selecting SD, HD, 3D and 2D-3D.

차상위 계층(802)에서 최하위 계층(804)은 세로 형태의 녹화 목록에 대한 정보들이다. 다만, 전술한 바와 같이, 편의상 각 계층 별로 구분하여 설명한다.The lowest layer 804 in the next higher layer 802 is information on the recording list in the vertical form. However, as described above, the description will be made separately for each layer for convenience.

차상위 계층(802)는 녹화 목록 각각에 대한 정보들이 제공될 수 있다. 비록 도 7에서는 제목(Title), 시간 정보 및 포맷 내지 해상도 정보(SD, HD, 3D 또는 SD, HD, 3D, 2D-3D)만이 도시되었으나 이외에도 다른 부가 정보들이 더 포함될 수 있다. 상기 부가 정보로 예를 들어, 총 재생 시간, 북마크 존재 여부 및 북마크 개수, 해당 컨텐츠의 기 재생 여부, 시리즈물인 경우 녹화된 다른 시리즈물에 대한 정보 등 다양한 정보가 제공될 수 있다.The next higher layer 802 may be provided with information about each of the recording lists. Although only Title, time information, and format to resolution information (SD, HD, 3D, or SD, HD, 3D, 2D-3D) are shown in FIG. 7, other additional information may be further included. As the additional information, for example, various information may be provided, such as a total playing time, whether a bookmark exists and the number of bookmarks, whether a corresponding content is already played, and information about another recorded series.

차차상위 계층(803)은 각 녹화물의 썸네일 이미지가 제공된다. 또한, 좌우 양 측의 끝에는 하나의 화면에 모든 녹화물을 한 번에 다 제공할 수 없는 경우에 탐색 편의를 위해 페이지 스크롤 키(page scroll key)가 구비될 수 있다. 또한, 각 녹화물과 녹화물 사이에는 하나의 컨텐츠만 스크롤할 수 있는 키가 제공될 수도 있다. Gradually higher layer 803 is provided with thumbnail images of each recording. In addition, at the ends of the left and right sides, a page scroll key may be provided for the convenience of navigation when all the recordings cannot be provided on one screen at a time. In addition, a key for scrolling only one content may be provided between each recording.

최하위 계층(804)는 특별한 정보가 제공되기 보다는 해당 UI의 백그라운 라이브 영상이 제공될 수 있다.The lowest layer 804 may be provided with a background live image of the UI, rather than providing special information.

도 8에서 예를 들어, 특정 녹화물(811)이 선택된 경우, 디지털 방송 수신기는 세로로 활성화된 창을 제공하고, 상기 창에 선택된 녹화물의 지시자로서 녹화 목록 중 몇번째에 해당하는지 정보를 제공하고, 썸네일 이미지는 다른 녹화 목록과 다르게 하이라이트시켜 제공할 수 있다. 또한, 하이라이트된 썸네일 이미지 아래에는 해당 녹화물을 제어하기 위한 다양한 기능(function)들이 제공될 수 있다. 이러한 기능으로 도 8에서는 해당 녹화물의 재생(play) 기능, 해당 녹화물을 녹화 목록 및 저장 공간에서 제거하기 위한 삭제(delete) 기능, 해당 녹화물에 대해 사용자가 원하는 제목으로 편집할 수 있도록 하는 제목 편집(title edit) 기능, 해당 녹화물에 대한 상세 정보 출력 요청 기능(detail) 및 DVHS(Data Video Home System) 출력 기능 등 다양한 기능들이 제공될 수 있다. 상기에서 상세 정보 실행 요청이 수신되면, 디지털 방송 수신기는 해당 녹화물 저장시 함께 저장되었던 부가 정보들 예를 들어, 전술한 스트림 인덱스 정보, 스트림 정보, 썸네일 정보를 제공할 수도 있으며, 네트워크를 통해 연결된 외부로부터 녹화물과 관련된 정보를 수신하여 제공할 수도 있다.
In FIG. 8, for example, when a specific recording 811 is selected, the digital broadcast receiver provides a vertically activated window, and provides information on which of the recording lists corresponds to the indicator of the selected recording in the window. The thumbnail image can be provided by highlighting it unlike other recording lists. In addition, various functions may be provided under the highlighted thumbnail image for controlling the recording. With this function, in FIG. 8, the play function of the recording, the delete function for removing the recording from the recording list and the storage space, and the title edit (the user can edit the desired title for the recording) Various functions may be provided, such as a title edit function, a detailed information output request function for a corresponding recording, and a Data Video Home System (DVHS) output function. When the request for executing the detailed information is received, the digital broadcasting receiver may provide additional information, for example, the above-described stream index information, stream information, and thumbnail information, which were stored together when storing the recording. Information related to the recordings may be received from and provided.

도 9 내지 11은 본 발명에 따라 디지털 방송 수신기에서 컨텐츠의 포맷을 변환 처리하는 과정의 각 실시 예를 설명하기 위해 도시한 순서도이다.9 to 11 are flowcharts illustrating each embodiment of a process of converting a format of content in a digital broadcast receiver according to the present invention.

도 9는 디지털 방송 수신기에서 컨텐츠가 포함된 스트림을 처리하는 방법의 일 예로서, 입력되는 2D 스트림을 재가공하고(S901), 재가공된 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하고(S902), 변환된 3D 스트림에 대하여 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하여(S903), 변환된 3D 스트림을 상기 식별 정보와 함께 저장한다(S904).
FIG. 9 illustrates an example of a method of processing a stream including content in a digital broadcasting receiver. The input 2D stream is reprocessed (S901), and the reprocessed 2D stream is converted into a 3D stream according to a predefined method (S902). ), Identification information including at least one of stream index information, thumbnail image information, 3D format information, and additional information is generated for the converted 3D stream (S903), and the converted 3D stream is stored together with the identification information ( S904).

도 10은 디지털 방송 수신기에서 스트림 처리 방법의 다른 예로, 입력되는 2D 스트림을 재가공하고(S1001), 재가공된 2D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하고(S1002), 재가공된 2D 스트림을 상기 식별 정보와 함께 저장한 후(S1003), 저장된 2D 스트림을 추출하고(S1004), 추출된 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하여(S1005), 상기 3D 스트림을 출력한다(S1006).FIG. 10 illustrates another example of a method for processing a stream in a digital broadcasting receiver, in which an input 2D stream is reprocessed (S1001), and at least one or more of stream index information, thumbnail image information, 3D format information, and additional information for the reprocessed 2D stream are illustrated. After generating the identification information including (S1002), and storing the reprocessed 2D stream with the identification information (S1003), and extracts the stored 2D stream (S1004), and extracts the extracted 2D stream in accordance with a predefined method In operation S1005, the 3D stream is output (S1006).

도 11은 디지털 방송 수신기에서 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하고(S1101), 변환된 3D 스트림을 출력하는 방법에 관한 것으로, 변환된 3D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하고(S1102), 상기 식별 정보에 기초하여 변환된 3D 스트림이 다른 스트림과 구분되어 표시되도록 구성한 UI를 제공하여(S1103), 상기 UI를 통한 외부 입력에 따라 상기 변환된 3D 스트림을 출력한다(S1104).
FIG. 11 relates to a method of converting a 2D stream into a 3D stream according to a predefined method in a digital broadcasting receiver (S1101) and outputting the converted 3D stream. The stream index information and thumbnail image information of the converted 3D stream are illustrated in FIG. Generating identification information including at least one of 3D format information and additional information (S1102), and providing a UI configured to display the converted 3D stream separately from other streams based on the identification information (S1103). The converted 3D stream is output according to an external input through a UI (S1104).

상술한 바와 같이, 본 발명에 따르면, 수신기의 성능 향상에 따라 점차 수신기에서 제공할 수 있는 애플리케이션이 증가하고 있는바, 수신기에서 상호 호환성을 유지하면서, 해당 애플리케이션 엔진만 구비하면 간단하게 다양하고 유용한 애플리케이션을 구동할 수 있어 사용자의 이용 편의를 제고할 수 있다.As described above, according to the present invention, as the performance of the receiver increases, applications that can be provided by the receiver are gradually increasing. Therefore, various and useful applications are simply provided with only the corresponding application engine while maintaining mutual compatibility in the receiver. It can be driven to enhance the user's convenience.

이상 본 발명은 본 발명의 정신 및 필수적 특징을 벗어나지 않는 범위에서 다른 특정한 형태로 구체화될 수 있음은 당업자에게 자명하다.It will be apparent to those skilled in the art that the present invention can be embodied in other specific forms without departing from the spirit and essential features of the present invention.

따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다.Accordingly, the above detailed description should not be construed as limiting in all aspects and should be considered as illustrative.

본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The scope of the invention should be determined by reasonable interpretation of the appended claims, and all changes within the equivalent scope of the invention are included in the scope of the invention.

401: 튜너부 402: 복조부
403: 역다중화부 404: 시그널링 정보 처리부
405: 애플리케이션 제어부 409: 외부 입력 수신부
410: 처리부 415: 제어부
416: UI 제어부 408/417: 저장부
418: 믹서부 419: 출력 포맷터부
420: 디스플레이 모듈
401: tuner portion 402: demodulation portion
403: demultiplexer 404: signaling information processor
405: application control unit 409: external input receiving unit
410: processing unit 415: control unit
416: UI control unit 408/417: storage unit
418: mixer section 419: output formatter section
420: display module

Claims (30)

입력되는 2D 스트림을 재가공하는 단계;
재가공된 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하고, 변환된 3D 스트림에 대하여 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하는 단계; 및
변환된 3D 스트림을 상기 식별 정보와 함께 저장하는 단계;를 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
Reprocessing the input 2D stream;
Converting the reprocessed 2D stream into a 3D stream according to a predefined manner, and generating identification information including at least one of stream index information, thumbnail image information, 3D format information, and additional information for the converted 3D stream; And
And storing the converted 3D stream together with the identification information.
제1항에 있어서,
상기 스트림 인덱스 정보는,
스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 1,
The stream index information,
And at least one or more of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.
제1항에 있어서,
상기 썸네일 이미지 정보는,
스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 1,
The thumbnail image information,
And a thumbnail image, which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.
제1항에 있어서,
상기 스트림 정보는,
스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 1,
The stream information,
A stream processing method in a digital broadcasting receiver including at least one of reproduction information, time information, and size information of a stream.
제1항에 있어서,
상기 3D 포맷 정보는,
싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 1,
The 3D format information,
And a identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.
제1항에 있어서,
상기 기정의된 방식은,
입력되는 2D 스트림에 대해 기정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하는 단계;와
추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환하는 단계;를 포함하여 수행되는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 1,
The predefined method is
Performing a motion analysis on a predetermined 2D stream in a predetermined unit and estimating depth information based on the result of the motion analysis; and
And applying a depth to the 2D stream based on the estimated depth information and converting the 2D stream into a 3D stream.
입력되는 2D 스트림을 재가공하고, 재가공된 2D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하는 단계;
재가공된 2D 스트림을 상기 식별 정보와 함께 저장하는 단계;
저장된 2D 스트림을 추출하고, 추출된 2D 스트림을 기정의된 방식에따라 3D 스트림으로 변환하는 단계;
상기 3D 스트림을 출력하는 단계;를 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
Reprocessing the input 2D stream and generating identification information including at least one of stream index information, thumbnail image information, 3D format information, and additional information for the reprocessed 2D stream;
Storing the reprocessed 2D stream with the identification information;
Extracting the stored 2D stream and converting the extracted 2D stream into a 3D stream according to a predefined manner;
Outputting the 3D stream; and processing the stream in a digital broadcast receiver.
제7항에 있어서,
상기 스트림 인덱스 정보는,
스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 7, wherein
The stream index information,
And at least one or more of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.
제7항에 있어서,
상기 썸네일 이미지 정보는,
스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 7, wherein
The thumbnail image information,
And a thumbnail image, which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.
제7항에 있어서,
상기 스트림 정보는,
스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 7, wherein
The stream information,
A stream processing method in a digital broadcasting receiver including at least one of reproduction information, time information, and size information of a stream.
제7항에 있어서,
상기 3D 포맷 정보는,
싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 7, wherein
The 3D format information,
And a identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.
제7항에 있어서,
상기 기정의된 방식은,
입력되는 2D 스트림에 대해 기정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하는 단계;와
추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환하는 단계;를 포함하여 수행되는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 7, wherein
The predefined method is
Performing a motion analysis on a predetermined 2D stream in a predetermined unit and estimating depth information based on the result of the motion analysis; and
And applying a depth to the 2D stream based on the estimated depth information and converting the 2D stream into a 3D stream.
디지털 방송 수신기에서 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하고, 변환된 3D 스트림을 출력하는 방법에 있어서,
변환된 3D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함한 식별 정보를 생성하는 단계;
상기 식별 정보에 기초하여 변환된 3D 스트림이 다른 스트림과 구분되어 표시되도록 구성한 UI를 제공하는 단계; 및
상기 UI를 통한 외부 입력에 따라 상기 변환된 3D 스트림을 출력하는 단계;를 포함하는 디지털 방송 수신기에서 스트림 출력 방법.
In the method for converting a 2D stream to a 3D stream in a digital broadcast receiver according to a predefined method, and outputting the converted 3D stream,
Generating identification information including at least one of stream index information, thumbnail image information, 3D format information, and additional information about the converted 3D stream;
Providing a UI configured to display the converted 3D stream separately from other streams based on the identification information; And
And outputting the converted 3D stream according to an external input through the UI.
제13항에 있어서,
상기 스트림 인덱스 정보는,
스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The stream index information,
And at least one or more of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.
제13항에 있어서,
상기 썸네일 이미지 정보는,
스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The thumbnail image information,
And a thumbnail image, which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.
제13항에 있어서,
상기 스트림 정보는,
스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The stream information,
A stream processing method in a digital broadcasting receiver including at least one of reproduction information, time information, and size information of a stream.
제13항에 있어서,
상기 3D 포맷 정보는,
싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함하는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The 3D format information,
And a identification information for identifying an output format to which the converted 3D stream belongs among a single stream output format and a dual stream output format.
제13항에 있어서,
상기 기정의된 방식은,
입력되는 2D 스트림에 대해 기정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하는 단계;와
추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환하는 단계;를 포함하여 수행되는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The predefined method is
Performing a motion analysis on a predetermined 2D stream in a predetermined unit and estimating depth information based on the result of the motion analysis; and
And applying a depth to the 2D stream based on the estimated depth information and converting the 2D stream into a 3D stream.
제13항에 있어서,
상기 변환된 3D 스트림은,
현재 튜닝된 채널을 통해 수신되는 스트림으로부터 실시간으로 변환되거나 기 저장된 2D 스트림으로부터 변환되는 디지털 방송 수신기에서 스트림 처리 방법.
The method of claim 13,
The converted 3D stream,
A stream processing method in a digital broadcasting receiver which is converted in real time from a stream received through a currently tuned channel or from a pre-stored 2D stream.
디지털 방송 수신기에 있어서,
2D 스트림을 수신하는 수신부;
2D 스트림을 재가공하고, 재가공된 2D 스트림에 대한 참조 정보를 생성하는 제1 스트림 매니저;
재가공된 2D 스트림을 기정의된 방식에 따라 3D 스트림으로 변환하는 변환부;
변환된 3D 스트림에 대한 참조 정보를 생성하고, 상기 3D 스트림의저장 및 재생을 제어하는 제2 스트림 매니저;
재가공된 2D 스트림 및 변환된 3D 스트림을 상기 각 스트림에 대해 생성된 식별정보와 함께 저장하는 저장부; 및
변환된 3D 스트림을 출력하는 출력부;를 포함하는 디지털 방송 수신기.
In a digital broadcast receiver,
Receiving unit for receiving a 2D stream;
A first stream manager for reprocessing the 2D stream and generating reference information for the reprocessed 2D stream;
A conversion unit for converting the reprocessed 2D stream into a 3D stream according to a predefined method;
A second stream manager for generating reference information on the converted 3D stream and controlling storage and playback of the 3D stream;
A storage unit for storing the reprocessed 2D stream and the converted 3D stream together with identification information generated for each stream; And
And an output unit for outputting the converted 3D stream.
제20항에 있어서,
상기 변환부는,
제1 스트림 매니저로부터 재가공된 2D 스트림과 저장부로부터 추출되는 기 재가공된 2D 스트림 중 적어도 하나를 수신하여 3D 스트림으로 변환하는 디지털 방송 수신기.
The method of claim 20,
Wherein,
And a digital broadcast receiver for receiving at least one of a reprocessed 2D stream from a first stream manager and a preprocessed 2D stream extracted from a storage unit and converting the received 2D stream into a 3D stream.
제20항에 있어서,
상기 2D 스트림에 대한 참조 정보는,
2D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기.
The method of claim 20,
Reference information about the 2D stream,
And at least one of stream index information, thumbnail image information, 3D format information, and additional information for the 2D stream.
제20항에 있어서,
상기 3D 스트림에 대한 참조 정보는,
변환된 3D 스트림에 대한 스트림 인덱스 정보, 썸네일 이미지 정보, 3D 포맷 정보 및 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기.
The method of claim 20,
Reference information about the 3D stream,
And at least one of stream index information, thumbnail image information, 3D format information, and additional information for the converted 3D stream.
제22항 또는 제23항에 있어서,
상기 스트림 인덱스 정보는,
스트림을 구성하는 각 픽쳐(picture)에 대하여 픽쳐 타입 정보, 스트림 오프셋 정보 및 픽쳐 특성 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기.
The method of claim 22 or 23,
The stream index information,
And at least one of picture type information, stream offset information, and picture characteristic information for each picture constituting the stream.
제22항 또는 제23항에 있어서,
상기 썸네일 이미지 정보는,
스트림의 정지 영상을 보다 작은 크기로 축소한 이미지인 썸네일 이미지와, 상기 썸네일 이미지의 스트림 내 추출 위치에 대한 정보와 부가 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기.
The method of claim 22 or 23,
The thumbnail image information,
And at least one of a thumbnail image which is an image obtained by reducing a still image of a stream to a smaller size, and at least one of information and additional information about an extraction position of the thumbnail image in the stream.
제22항 또는 제23항에 있어서,
상기 스트림 정보는,
스트림의 재생 정보, 시간 정보, 크기 정보 중 적어도 하나 이상을 포함하는 디지털 방송 수신기.
The method of claim 22 or 23,
The stream information,
And at least one of reproduction information, time information, and size information of the stream.
제22항 또는 제23항에 있어서,
상기 3D 포맷 정보는,
싱글 스트림 출력 포맷과 듀얼 스트림 출력 포맷 중 상기 변환된 3D 스트림이 속한 출력 포맷을 식별하는 식별 정보를 포함하는 디지털 방송 수신기.
The method of claim 22 or 23,
The 3D format information,
And identification information identifying an output format to which the converted 3D stream belongs, among a single stream output format and a dual stream output format.
제20항에 있어서,
상기 기정의된 방식은,
입력되는 2D 스트림에 대해 기 정해진 단위로 동작 분석(motion analysis)을 수행하고, 상기 동작 분석 결과에 기초하여 깊이 정보를 추정하고, 추정된 깊이 정보에 근거하여 상기 2D 스트림에 깊이를 적용하여 3D 스트림으로 변환하는 디지털 방송 수신기.
The method of claim 20,
The predefined method is
A motion analysis is performed on the input 2D stream in a predetermined unit, the depth information is estimated based on the result of the motion analysis, and the depth is applied to the 2D stream based on the estimated depth information. To digital broadcast receivers.
제20항에 있어서,
변환된 3D 스트림이 다른 스트림과 구분되어 표시되도록 구성된 UI를 생성하도록 제어하는 제어부;를 더 포함하는 디지털 방송 수신기.
The method of claim 20,
And a controller configured to generate a UI configured to display the converted 3D stream separately from other streams.
제29항에 있어서,
상기 제어부는,
저장된 3D 스트림에 대한 참조 정보에 기초하여, 변환된 3D 스트림이 다른 스트림과 차별화되는 썸네일 이미지 정보, 저장부의 여유 공간을 표시하도록 제어하는 디지털 방송 수신기.
The method of claim 29,
The control unit,
A digital broadcast receiver for controlling to display the thumbnail image information, the free space of the storage unit, the differentiated 3D stream is differentiated from other streams based on reference information about the stored 3D stream.
KR1020100065150A 2010-07-07 2010-07-07 A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver KR20120004587A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100065150A KR20120004587A (en) 2010-07-07 2010-07-07 A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100065150A KR20120004587A (en) 2010-07-07 2010-07-07 A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver

Publications (1)

Publication Number Publication Date
KR20120004587A true KR20120004587A (en) 2012-01-13

Family

ID=45611024

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100065150A KR20120004587A (en) 2010-07-07 2010-07-07 A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver

Country Status (1)

Country Link
KR (1) KR20120004587A (en)

Similar Documents

Publication Publication Date Title
US8503869B2 (en) Stereoscopic video playback device and stereoscopic video display device
TWI573425B (en) Generating a 3d video signal
US10051257B2 (en) 3D image reproduction device and method capable of selecting 3D mode for 3D image
JP5221227B2 (en) Stereoscopic video data stream generation method and apparatus for reproduction of partial data section of stereoscopic video, and reproduction method and apparatus of partial data section of stereoscopic video
WO2012017643A1 (en) Encoding method, display device, and decoding method
RU2552137C2 (en) Entry points for fast 3d trick play
JP5870272B2 (en) Video processing device
KR101370927B1 (en) Method and apparatus for displaying images
JP5595946B2 (en) Digital content receiving apparatus, digital content receiving method, and digital content transmitting / receiving method
KR101797495B1 (en) Digital receiver and method for processing caption data in the digital receiver
JP2010273333A (en) Three-dimensional image combining apparatus
KR20110088334A (en) Method and apparatus for generating datastream to provide 3-dimensional multimedia service, method and apparatus for receiving the same
TWI527433B (en) Method for generating and rebuilding a stereoscopic-compatible video stream and related coding and decoding devices
KR20130008548A (en) Apparatus and method for processing video content
US20100329640A1 (en) Recording/Reproducing Apparatus
JP2005094168A (en) File structure, image recording apparatus and image reproducing apparatus employing the same
WO2012029293A1 (en) Video processing device, video processing method, computer program and delivery method
CN102144395A (en) Stereoscopic image reproduction method in quick search mode and stereoscopic image reproduction apparatus using same
US8934757B2 (en) Content distribution system, playback device, distribution server, playback method, and distribution method
US20130266287A1 (en) Reproduction device and reproduction method
US20120188340A1 (en) Content distribution system, playback apparatus, distribution server, playback method, and distribution method
KR20120004587A (en) A digital broadcast receiver and a method for processing a stream in a digital broadcast receiver
JP2011199388A (en) Reproducing device, reproduction control method, and program
JP6732079B2 (en) Video playback method
US20140078255A1 (en) Reproduction device, reproduction method, and program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application