KR20130096289A - 모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법 - Google Patents

모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법 Download PDF

Info

Publication number
KR20130096289A
KR20130096289A KR1020137013354A KR20137013354A KR20130096289A KR 20130096289 A KR20130096289 A KR 20130096289A KR 1020137013354 A KR1020137013354 A KR 1020137013354A KR 20137013354 A KR20137013354 A KR 20137013354A KR 20130096289 A KR20130096289 A KR 20130096289A
Authority
KR
South Korea
Prior art keywords
image
broadcast
receiving
video
broadcast signal
Prior art date
Application number
KR1020137013354A
Other languages
English (en)
Other versions
KR101867824B1 (ko
Inventor
서종열
토마스고머
이준휘
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20130096289A publication Critical patent/KR20130096289A/ko
Application granted granted Critical
Publication of KR101867824B1 publication Critical patent/KR101867824B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors

Abstract

본 발명은 모바일 환경에서 3차원 방송 영상을 수신 처리하는 방법 및 장치에 관한 것이다. 본 발명의 일 실시예에 의한 3차원 방송 영상을 수신 처리하는 방법 은 3차원 방송 영상을 위한 좌영상 및 우영상을 포함하고, 상기 3차원 방송 영상을 시그널링하기 위한 서비스 시그널링 채널을 포함하는 방송 신호를 수신하는 단계, 상기 서비스 시그널링 채널에 포함되는 서비스 맵 테이블 (SMT) 을 파싱하고, 상기 파싱된 SMT에서, 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었는지를 가리키는 컴포넌트 타입 정보를 파싱하고, 상기 컴포넌트 타입 정보가 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었음을 나타내는 경우, 상기 SMT에서 하나의 비디오 프레임의 특정 영역을 통하여 좌영상을 구성하는 좌영상 이미지 또는 우영상을 구성하는 우영상 이미지가 전송되는지 가리키는 좌/우영상 이미지 정보를 파싱하는 단계, 상기 파싱된 좌/우영상 이미지 정보에 따라, 상기 좌영상 이미지와 우영상 이미지를 3차원 영상 이미지로 포맷팅하는 단계 및 상기 3차원 영상 이미지를 디스플레이하는 단계를 포함한다.

Description

모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법 {RECEIVER APPARATUS AND METHOD FOR RECEIVING A THREE-DIMENSIONAL BROADCAST SIGNAL IN A MOBILE ENVIRONMENT}
본 발명은 3D (3-dimentional) 방송 신호를 수신 처리하는 방법 및 장치에 관한 것이다.
보다 상세하게는 모바일 방송 수신 환경에서 3D 방송 신호를 수신하는 방법 및 장치에 관한 것이다.
3차원 텔레비젼(3-Dimensional Television, 3DTV)의 보급이 본격화됨에 따라 저장 매체에 의한 3차원(3D) 영상 컨텐츠 보급뿐만 아니라 디지털 방송에 의한 3차원 영상 컨텐츠의 전송이 활성화되고 있다.
일반적으로 3차원 영상은 두 눈의 스테레오(stereo) 시각 원리를 이용하여 입체감을 제공한다. 인간은 두 눈의 시차, 다시 말해 약 65mm 정도 떨어진 두 눈 사이의 간격에 의한 양안 시차(binocular parallax)를 통해 원근감을 느끼므로, 3D 영상은 좌안과 우안 각각이 연관된 평면 영상을 보도록 영상을 제공하여 입체감과 원근감을 제공할 수 있다.
이러한 3차원 영상 디스플레이 방법에는 스테레오스코픽(stereoscopic) 방식, 부피표현(volumetric) 방식, 홀로그래픽(holographic) 방식 등이 있다. 스테레오스코픽 방식의 경우, 좌안에서 시청되기 위한 좌영상 (left view; 레프트 뷰) 이미지와 우안에서 시청되기 위한 우영상 (right view; 라이트 뷰) 이미지를 제공하여, 편광 안경 또는 디스플레이 장비 자체를 통해 좌안과 우안이 각각 레프트 뷰 이미지와 우측 이미지를 시청함으로써 3차원 영상 효과를 인지할 수 있도록 한다.
한편, 최근 모바일 환경에서의 방송 서비스가 제공되어 시청자의 편의를 도모하고 있다. 그러나, 모바일 환경에서의 방송 서비스는 3차원 방송 영상에까지 그 영역을 확장하지는 못하고 있는 실정이다.
본 발명이 이루고자 하는 기술적 과제는, 모바일 방송 수신 환경에서도 3차원 방송 영상을 수신 처리는 것에 있다.
본 발명이 이루고자 하는 다른 기술적 과제는, 모바일 방송 수신 환경에서도 기존 고정 방송 환경과의 역호환성을 유지하면서, 3차원 방송 영상을 수신 처리할 수 있도록 하는 것에 있다.
전술한 기술적 과제를 달성하기 위하여, 본 발명의 일 실시예에 따른 3차원 방송 영상을 수신 처리하는 방법은 3차원 방송 영상을 위한 좌영상 및 우영상을 포함하고, 상기 3차원 방송 영상을 시그널링하기 위한 서비스 시그널링 채널을 포함하는 방송 신호를 수신하는 단계, 상기 서비스 시그널링 채널에 포함되는 서비스 맵 테이블 (SMT) 을 파싱하고, 상기 파싱된 SMT에서, 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었는지를 가리키는 컴포넌트 타입 정보를 파싱하고, 상기 컴포넌트 타입 정보가 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었음을 나타내는 경우, 상기 SMT에서 하나의 비디오 프레임의 특정 영역을 통하여 좌영상을 구성하는 좌영상 이미지 또는 우영상을 구성하는 우영상 이미지가 전송되는지 가리키는 좌/우영상 이미지 정보를 파싱하는 단계, 상기 파싱된 좌/우영상 이미지 정보에 따라, 상기 좌영상 이미지와 우영상 이미지를 3차원 영상 이미지로 포맷팅하는 단계 및/또는 상기 3차원 영상 이미지를 디스플레이하는 단계를 포함한다.
바람직하게는, 본 발명의 일 실시예에 따른 3차원 방송 영상을 수신 처리하는 방법은 상기 좌영상 이미지 및 우영상 이미지 중 적어도 어느 하나가 상기 비디오 프레임 내에서 뒤집어져 전송되는지 여부를 가리키는 3차원 이미지 방향 정보를 더 파싱하는 단계를 더 포함할 수 있다.
바람직하게는, 본 발명의 일 실시예에 따른 3차원 방송 영상을 수신 처리하는 방법은 상기 수신한 방송 신호에 포함된 기지데이터 열의 위치를 검출하는 단계 및/또는 상기 검출된 기지데이터 열의 위치로 상기 방송 신호에 포함된 기지데이터 열을 검출하여, 상기 방송 신호가 전송되는 채널에 대한 채널 등화를 수행하는 단계를 더 포함할 수 있다.
바람직하게는, 본 발명의 일 실시예에 따른 3차원 방송 영상을 수신 처리하는 방법은 상기 채널 등화가 수행된 후 수신되는 방송 신호에 포함된 데이터에 대하여 트렐리스 복호화를 수행하는 단계를 더 포함할 수 있다.
바람직하게는, 본 발명의 일 실시예에 따른 3차원 방송 영상을 수신 처리하는 방법은 상기 트렐리스 복호화된 데이터를 리드-솔로몬 (Reed-Solomon; RS) 프레임 단위에서, 에러정정복호화를 수행하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일 실시예에 따른, 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치는 전술한 방법을 수행하는 장치를 포함할 수 있다.
본 발명에 따르면, 모바일 방송 수신 환경에서도 3차원 방송 영상을 효율적으로 수신 처리할 수 있는 효과가 있다.
본 발명에 따르면, 모바일 방송 수신 환경에서도 기존 고정 방송 환경과의 역호환성을 유지하면서, 3차원 방송 영상을 수신 처리할 수 있는 효과가 있다.
도 1은 본 발명의 일 실시예에 따른, 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른, 탑바텀 방식으로 스테레오스코픽 이미지를 멀티플렉싱하는 경우 이미지를 구성하는 방법을 도시한 도면이다.
도 3는 본 발명의 일 실시예에 따른, 사이드바이사이드 방식으로 스테레오스코픽 이미지를 멀티플렉싱하는 경우 이미지를 구성하는 방법을 도시한 도면이다.
도 4는 본 발명의 일 실시예에 따른, 스트레오 스코픽 비디오를 위한 MH_component_data 의 신택스를 나타낸 도면이다.
도 5는 본 발명의 일 실시예에 따른, 3D_orientation 필드의 각 설정값을 설명한 테이블을 나타낸 도면이다.
도 6은 본 발명의 일 실시예에 따른, 모바일 방송 수신기을 나타낸 도면이다.
도 7은 본 발명의 일 실시예에 따른, 3차원 방송 영상을 수신 처리하는 방법을 나타낸 순서도이다.
발명의 실시를 위한 최선의 형태
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 실시 예를 상세하게 설명하지만, 본 발명이 실시 예들에 의해 제한되거나 한정되는 것은 아니다.
본 명세서에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 관례 또는 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 그 의미를 기재할 것이다. 따라서 본 명세서에서 사용되는 용어는, 단순한 용어의 명칭이 아닌 그 용어가 가지는 실질적인 의미와 본 명세서의 전반에 걸친 내용을 토대로 해석되어야 함을 밝혀두고자 한다.
3차원 영상 표현 방법은 2개의 시점을 고려하는 스테레오스코픽 방식과 3개 이상의 시점을 고려하는 멀티플 뷰 이미지(multiple view image) 방식(또는 다시점 방식)을 포함할 수 있다. 이에 비해 종래의 싱글 뷰 이미지(single view image) 방식은 모노스코픽 영상 방식이라고 지칭할 수 있다.
스테레오스코픽 방식은 일정한 거리로 이격되어 있는 좌측 카메라와 우측 카메라로 동일한 피사체를 촬영하여 획득한 레프트 뷰 이미지와 라이브 뷰 이미지의 한 쌍의 이미지를 사용한다. 다시점 방식은 일정한 거리나 각도를 갖는 3개 이상의 카메라에서 촬영하여 획득한 3개 이상의 이미지를 사용한다. 이하에서 스테레오스코픽 방식을 일 실시예로 본 발명을 설명하나 본 발명의 사상은 다시점 방식에도 적용될 수 있을 것이다.
본 발명에 따른 스테레오스코픽 방식은 Side-by-Side 방식, Top-Bottom 방식, checker board 방식 등이 있다. Side-by-Side 방식은 좌 영상과 우 영상을 각각 수평방향으로 1/2 다운샘플링하고, 샘플링한 하나의 영상을 left 영역에, 샘플링한 나머지 하나의 영상을 right 영역에 위치시켜 하나의 스테레오스코픽 영상을 구성하는 방식이며, Top-Bottom 방식은 좌 영상과 우 영상을 각각 수직방향으로 1/2 다운샘플링하고, 샘플링한 하나의 영상을 Top 영역에, 샘플링한 나머지 하나의 영상을 bottom 영역에 위치시켜 하나의 스테레오스코픽 영상을 구성하는 방식이다. 체커보드 방식은 좌 영상과 우 영상을 각각 수직 및 수평방향으로 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성하는 방식이다. 하지만 본 발명에 따른 스테레오스코픽 방식은 위의 예에 한정되거나 제한되는 것은 아니다.
3차원 영상을 전송하고자 할 때 고려해야 하는 사항 중 하나는 2차원 영상과의 호환성이다. 3차원 영상 디스플레이를 지원하지 않는 수신기는 수신한 방송 신호에 포함된 3차원 영상을 2차원 영상으로 디스플레이 해야 하며, 3DTV에서도 필요한 경우에는 2차원 영상을 디스플레이할 수 있어야 하기 때문이다.
도 1은 본 발명의 일 실시예에 따른, 비디오 스트림 포맷의 스테레오스코픽 이미지 멀티플렉싱 포맷을 도시한 도면이다.
싱글 비디오 스트림 포맷에는 (a)의 사이드바이사이드(side-by-side) 포맷, (b)의 탑바텀(top-bottom) 포맷, (c)의 인터레이스드(interlaced) 포맷, (d)의 프레임시퀀셜(frame sequential) 포맷, (e)의 체커보드(checker board) 포맷, (f)의 애너글리프(anaglyph) 포맷 등이 있다.
(a)의 사이드바이사이드 포맷은 좌 영상과 우 영상을 각각 수평방향으로 1/2 다운샘플링하고, 샘플링한 하나의 영상을 좌측에, 샘플링한 나머지 하나의 영상을 우측에 위치시켜 하나의 스테레오스코픽 영상을 구성하는 포맷이다. (b)의 탑바텀 방식은 좌 영상과 우 영상을 각각 수직방향으로 1/2 다운샘플링하고, 샘플링한 하나의 영상을 상부에, 샘플링한 나머지 하나의 영상을 하부에 위치시켜 하나의 스테레오스코픽 영상을 구성하는 포맷이다. (c)의 인터레이스드 방식은 좌 영상과 우 영상을 각각 수평방향으로 라인마다 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성하거나, 좌 영상과 우 영상을 각각 수직방향으로 라인마다 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성하는 포맷이다. (d)의 프레임 시퀀셜 방식은 하나의 비디오 스트림에 좌영상과 우영상을 시간적으로 교차하여 구성하는 포맷이다. (e)의 체커보드 포맷은 좌 영상과 우 영상을 각각 수직 및 수평방향으로 교차하도록 1/2 다운샘플링하여 두 영상을 하나의 영상으로 구성하는 포맷이다. (f)의 애너글리프 포맷은 보색 대비를 이용하여 입체 효과를 내도록 영상을 구성하는 포맷이다.
수신 시스템에서 이러한 다양한 방식으로 전송된 비디오 데이터를 효율적으로 디멀티플렉싱하여 비디오 데이터를 처리하려면 상술한 멀티플렉싱 포맷에 대한 정보를 전송해줄 필요가 있다.
도 1에서, 특히 사이드바이사이드 방식 및 탑바텀 방식으로 비디오 데이터를 전송하는 경우 1/2 다운 샘플링을 한 2개의 영상을 송신하므로 각각의 영상의 해상도는 1/2가 될 수 있다. 그러나 하프 레졸루션의 영상 2개를 전송하는 경우 비디오 데이터의 용량이 하나의 풀 레졸루션의 영상을 전송하는 경우의 비디오 데이터 용량보다 커질 수 있다. 예를 들면, 비디오 데이터를 기준 영상과 그에 대한 변화 및 차이를 나타내도록 코딩하는 경우 비디오 압축율이 상승할 수 있는데, 하나의 풀 레졸루션의 비디오 데이터의 압축율에 비해 2개의 하프 레졸루션의 비디오 데이터의 압축율이 떨어지면 이러한 경우가 발생할 수 있다. 따라서, 송신 시스템에서 전송시 압축율을 높이기 위해 인접하는 이미지의 유사성을 높일 수 있도록 2개의 영상에서 하나를 상하로 인버팅(inverting)하거나 좌우로 미러링(mirroring)하여 전송할 수 있다. 이러한 이미지의 인버팅 또는 미러링은, 이하의 설명에서 이미지 플리핑으로 지칭할 수도 있다.
도 2는 본 발명의 일 실시예에 따른, 탑바텀 방식으로 스테레오스코픽 이미지를 멀티플렉싱하는 경우 이미지를 구성하는 방법을 도시한 도면이다.
이미지들(2010 내지 2030)은 레프트 이미지를 탑에, 라이트 이미지를 바텀에 위치시켜 이미지를 구성하며, 이미지들(2040 내지 2060)은 레프트 이미지를 바텀에, 라이트 이미지를 탑에 위치시켜 이미지를 구성한다.
이미지(2010)은 레프트 이미지과 라이트 이미지가 노멀하게 구성되어 있으며, 이미지(2020)은 탑의 레프트 이미지가 인버팅된 구성을, 이미지(2030)은 바텀의 라이트 이미지가 인버팅된 구성을 나타낸다. 이미지(2040)은 라이트 이미지과 레프트 이미지가 노멀하게 구성되어 있으며, 이미지(2050)은 바텀의 레프트 이미지가 인버팅된 구성을, 이미지(2060)은 탑의 라이트 이미지가 인버팅된 구성을 나타낸다.
도 3는 본 발명의 일 실시예에 따른, 사이드바이사이드 방식으로 스테레오스코픽 이미지를 멀티플렉싱하는 경우 이미지를 구성하는 방법을 도시한 도면이다.
이미지들(3010 내지 3030)은 레프트 이미지를 좌측에, 라이트 이미지를 우측에 위치시켜 이미지를 구성하며, 이미지들(3040 내지 3060)은 레프트 이미지를 우측에, 라이트 이미지를 좌측에 위치시켜 이미지를 구성한다.
이미지(3010)은 레프트 이미지과 라이트 이미지가 노멀하게 구성되어 있으며, 이미지(3020)은 좌측의 레프트 이미지가 미러링된 구성을, 이미지(3030)은 우측의 라이트 이미지가 미러링된 구성을 나타낸다. 이미지(3040)은 우이미지과 레프트 이미지가 노멀하게 구성되어 있으며, 이미지(3050)은 우측의 레프트 이미지가 미러링된 구성을, 이미지(3060)은 좌측의 라이트 이미지가 미러링된 구성을 나타낸다.
도 2 및 도 3에서 영상의 인버팅 및 미러링은 데이터 압축율의 차이를 가져올 수 있다. 예를 들어, 한 화면을 기준 화소로부터 주변 화소에 대한 데이터를 차이를 이용하여 압축하는 경우를 가정하자. 한 쌍의 스테레오스코픽 영상은 기본적으로 동일한 화면에 대한 3D 효과를 나타내는 영상의 쌍이므로 화면의 위치에 따른 정보가 유사할 개연성이 높다. 즉, 노멀하게 배치된 영상들(2010, 2040, 3010, 3040)에서는 좌영상과 우영상이 이어지는 부분에서 완전히 새로운 영상 정보가 이어지고, 압축되는 차분값들이 크게 변화할 수 있다. 그러나, 인버팅된 영상들 (2020, 2030, 2050, 2060)의 경우 좌영상의 하부와 우영상의 하부(2030, 2050) 또는 좌영상의 상부가 우영상의 상부(2020, 2060)와 이어지게 되어 좌영상과 우영상이 이어지는 부분에서 코딩되는 데이터의 양이 줄어들 수 있다. 미러링된 영상들 (3020, 3030, 3050, 3060)의 경우에도 좌영상의 우측과 우영상의 우측(3030, 3050)이 이어지거나 좌영상의 좌측과 우영상의 좌측(3020, 3060)이 이어지게 되어 좌영상과 우영상이 이어지는 부분에서 데이터의 유사성이 연속되므로 코딩되는 데이터의 양이 줄어들 수 있다.
수신 시스템에서 3D 비디오 스트림 내지는 3D 비디오 데이터를 수신하여 효율적으로 처리하려면 상술한 멀티플렉싱 포맷에 대한 정보를 전송해주여야 하며, 더불어 상술한 바와 같이 영상이 인버팅되거나 미러링된 경우에는 이에 관련된 정보를 전송해주어야 한다. 이러한 정보를 편의에 따라 테이블 또는 디스크립터로 정의할 수도 있다.
도 4는 본 발명의 일 실시예에 따른, 스트레오 스코픽 비디오를 위한 MH_component_data 의 신택스를 나타낸 도면이다.
본 발명의 일 실시예에 따른 MH_component_data는 3D_structure 필드, LR_first 필드, 3D_orientation 필드, profile_idc 필드, constraint_set0_flag 필드, constraint_set1_flag 필드, constraint_set2_flag 필드, AVC_compatible_flags 필드, level_idc 필드, AVC_still_present 필드 및/또는 AVC_24_hour_picture_flag 필드를 포함할 수 있다.
3D_structure 필드는 스트레오 스코픽 영상의 구조를 가리킨다. 예를 들면, 3D_structure 필드는 스트레오 스코픽 영상이 하프 레졸루션으로 구성되는지, 풀 레졸루션으로 구성되는지에 대한 정보를 포함할 수 있다. 또는, 하프 레졸루션의 경우에 있어서, 좌영상과 우영상의 멀티플렉싱 방식을 나타낼 수 있다. 즉, 3D_structure 필드는 도 1에 도시된 멀티플렉싱 방식 중 어느 방식이 사용되었는지 나타내는 정보를 포함할 수 있다.
LR_first 필드는 예를 들어, 사이드 바이 사이드 포맷인 경우, 좌측 하프 영상이 좌영상인지 우영상인지를 가리킨다. 다른 예로, 탑 앤 바텀 포맷인 경우, 탑 하프 영상이 좌영상인지 우영상인지를 가리킨다. 예를 들면, 사이드 바이 사이드 포맷인 경우, 3D_structure 필드가 '0' 으로 셋팅된 경우 좌측 하프 영상이 좌영상임을 나타내고, '1' 로 셋팅된 경우, 우영상임을 나타낸다.
3D_orientation 필드는 스트레오 스코픽 영상의 멀티플렉싱 구조에서, 좌영상 혹은 우영상이 인버팅 되었는지 여부를 가리키는 정보를 포함한다.
profile_idc 필드는 코딩된 비디오 시퀀스가 따르는 프로파일 정보를 가리킨다.
constraint_set0_flag 필드는 비디오 시퀀스 코딩에 대한 제 1 제한 사항이 해당 비디오 시퀀스 코딩에 적용되었는지를 나타낸다.
constraint_set1_flag 필드는 비디오 시퀀스 코딩에 대한 제 2 제한 사항이 해당 비디오 시퀀스 코딩에 적용되었는지를 나타낸다.
constraint_set2_flag 필드는 비디오 시퀀스 코딩에 대한 제 3 제한 사항이 해당 비디오 시퀀스 코딩에 적용되었는지를 나타낸다.
AVC_compatible_flags 필드는 비디오 시퀀스 코딩의 호환성 여부를 나타낸다.
level_idc 필드는 코딩된 비디오 시퀀스가 따르는 레벨 정보를 가리킨다.
AVC_still_present 필드는 AVC 픽쳐의 사용을 나타내는 정보이다.
본 발명의 일 실시예에 따르면, 서비스 맵 테이블의 MH_service_category 필드를 통하여 MH 서비스에 3D 서비스가 포함되었는지 여부를 시그널링할 수 있다. 이 경우, 3D 서비스를 수신처리 할 수 없는 수신기는 이 값을 인식하지 못하거나, 무시하도록 동작하여, 3D 서비스가 제공되는 경우에 있어서도 기존 수신기와의 역호환성이 보장된다.
또는 MH component descriptor를 통하여 3D 서비스를 시그널링할 수 있다. 예를 들면, MH component descriptor에 포함된 component_type을 통하여, 특정 component가 3D 서비스를 포함하고 있는지를 나타낼 수 있다. 수신기는 component_type의 설정값을 통하여 특정 component가 3D 서비스를 포함하고 있는지 인식할 수 있다.
한편, 전술한 바와 같이, MH_component_data 를 통하여, 3D 스트레오스코픽 비디오에 대한 기술을 할 수 있다.
본 발명의 다른 실시예에 따르면, 모바일 방송 수신기는 SMT의 MH_service_category를 이용해 수신되는 모바일 방송 서비스가 3D 방송 서비스인지를 판별한다. 이 과정은 선택적인 것이다. 또 다른 실시 예로는 기존의 모바일 디지털 방송을 나타내는 service_category 값을 사용하여 3D 방송 서비스를 식별할 수도 있다
모바일 방송 수신기는 MH Component Descriptor의 component_type 값을 이용해 해당 서비스에 3D 비디오 컴포넌트 (video component)가 포함되었는지를 판단한다. 기존 방송 수신기 (즉, legacy mobile receiver)는 component_type 필드를 이용해 3D 방송 서비스를 필터링할 수 있다.
모바일 방송 수신기는 MH_component_data의 상세 필드를 이용해 3D 비디오 컴포넌트 의 3D 포맷 정보 등을 미리 파악한다. 경우에 따라서 수신기가 지원 못하는 포맷이 포함된 경우에 해당 서비스를 필터 아웃 (filter out) 할 수도 있다.
모바일 방송 수신기는 디코딩된 이미지 신호를 수신해 3D 디스플레이의 픽셀 배치 (pixel arrangement)에 맞게 비디오 신호를 다시 포맷하고 (즉, 픽셀을 다시 맵핑하는 과정)을 수행한다. 이 때, 비디오의 3D 포맷 정보는 전술한 MH_component_data에 포함된 정보를 사용할 수 있다.
도 5는 본 발명의 일 실시예에 따른, 3D_orientation 필드의 각 설정값을 설명한 테이블을 나타낸 도면이다.
본 발명의 실시예에 따르면 3D_orientation 필드가 '00'으로 셋팅된 경우, 좌영상/우영상 모두 인버팅되지 않았음을 나타낸다.
3D_orientation 필드가 '01'으로 셋팅된 경우, 좌영상은 인버팅되지 않았고, 우영상은 인버팅되었음을 나타낸다.
3D_orientation 필드가 '10'으로 셋팅된 경우, 우영상은 인버팅되지 않았고, 좌영상은 인버팅되었음을 나타낸다.
3D_orientation 필드가 '11'으로 셋팅된 경우, 좌영상/우영상 모두 인버팅되었음을 나타낸다.
도 6은 본 발명의 일 실시예에 따른, 모바일 방송 수신기을 나타낸 도면이다.
본 발명의 일 실시예에 따른 모바일 방송 수신기는 베이스 밴드 프로세서 (6100), 물리적 적응 프로세서 (6200), 매니지먼트 프로세서 (6300) 및/또는 프리젠테이션 프로세서 (6400)을 포함한다.
베이스 밴드 프로세서 (6100)는 조작 컨트롤러 (6110), 튜너 (6120), VSB 복조부 (6130), 등화기 (6140), 기지데이터 열 검출기 (6150), 블록 디코더 (6160), 시그널링 디코더 (6170), 프라이머리 RS 프레임 디코더 (6180) 및/또는 세컨더리 RS 프레임 디코더 (6190)을 포함할 수 있다.
조작 컨트롤러 (6110)는 모바일 방송 수신기의 베이스 밴드 모듈의 동작을 관장한다. 즉, 베이스 밴드 프로세서의 각 부를 컨트롤 하는 역할을 수행한다.
튜너 (6120)는 특정 물리적 채널의 주파수로 수신기를 튜닝하는 역할을 한다. 튜너 (6120)는 튜닝된 특정 채널의 주파수는 중간주파수 (IF) 신호로 다운 컨버전하여 VSB 복조부 (6130) 및/또는 기지데이터 열 검출기 (6150)로 출력할 수 있다.
VSB 복조부 (6130)는 입력되는 통과대역의 디지털 IF신호에 대해 자동 이득 제어, 반송파 복구 및 타이밍 복구 등을 수행하여 기저대역 신호로 만든 후 등화기 (6140) 및/또는 기지데이터 열 검출기 (6150)로 출력한다. 해당 VSB 복조부 (6130)는 타이밍 복원이나 반송파 복구 시에 기지데이터 열 검출기 (6150)로부터 입력 받는 기지 데이터 심볼 열을 이용함으로써, 복조 성능을 향상 시킬 수 있다.
등화기 (6140)는 신호에 포함된 채널 상의 왜곡을 보상하는 역할을 한다. 등화기 (6140)는 복조된 신호에 포함된 채널 상의 왜곡을 보상한 후 블록 디코더 (6160)로 출력한다. 해당 등화기 (6140)는 기지데이터 열 검출기 (6150)로부터 입력 받는 기지 데이터 심볼 열을 이용함으로써, 등화 성능을 향상 시킬 수 있다. 또한 등화기 (6140)는 블록 디코더 (6160)의 복호 결과를 피드백으로 받아 등화 성능을 향상시킬 수도 있다.
기지데이터 열 검출기 (6150)는 복조가 이루어지기 전의 데이터 및/또는 복조가 일부 이루어진 데이터로부터 송신 측에서 삽입한 기지 데이터 위치를 검출한다. 기지데이터 열 검출기 (6150)는 검출된 기지 데이터 위치에 기반한 위치 정보와 함께 그 위치에서 발생시킨 기지 데이터의 열을 VSB 복조부 (6130)와 등화기 (6140)로 출력한다. 또한 기지데이터 열 검출기 (6150)는 송신 측에서 추가적인 부호화를 거친, 모바일 방송을 위한 모바일 서비스 데이터와 추가적인 부호화를 거치지 않은, 기존 방송을 위한 메인 서비스 데이터를 블록 디코더 (6160)에서 구분할 수 있도록 하기 위한 정보를 블록 디코더 (6160)로 출력할 수 있다.
블록 디코더 (6160)는 채널 등화된 후 입력되는 데이터가 송신 측에서 블록 인코딩 과 트렐리스 인코딩이 모두 수행된 데이터 (예를 들면, RS 프레임 내 데이터, 시그널링 데이터)이면 송신 측의 역으로 트렐리스 디코딩 및 블록 디코딩을 수행한다. 블록 인코딩은 수행되지 않고 트렐리스 인코딩만 수행된 데이터 (예를 들면, 메인 서비스 데이터)이면 트렐리스 디코딩만 수행한다.
시그널링 디코더 (6170)는 채널 등화된 후 입력되는 블록 인코딩과 트렐리스 인코딩이 모두 수행된 시그널링 데이터의 복호화를 수행한다.
프라이머리 RS 프레임 디코더 (6180)는 블록 디코딩된 데이터 중 RS (Reed-Solomon) 부호화 및/또는 CRC (Cyclic Redundancy Check) 부호화된 모바일 서비스 데이터만을 입력 받는다. 프라이머리 RS 프레임 디코더 (6180)는 송신 시스템의 RS 프레임 인코더의 역과정을 수행하여, RS 프레임 내의 오류들을 정정하며, 오류 정정된 다수의 데이터 그룹을 모아 하나의 RS 프레임을 형성한다. 해당 프라이머리 RS 프레임 디코더 (6180)는 실제 방송 서비스 등을 위하여 전송되는 프라이머리 RS 프레임을 복호화 한다.
세컨더리 RS 프레임 디코더 (6190)는 블록 디코딩된 데이터 중 RS (Reed-Solomon) 부호화 및/또는 CRC (Cyclic Redundancy Check) 부호화된 모바일 서비스 데이터만을 입력 받는다. 세컨더리 RS 프레임 디코더 (6190)는 송신 시스템의 RS 프레임 인코더의 역과정을 수행하여, RS 프레임 내의 오류들을 정정하며, 오류 정정된 다수의 데이터 그룹을 모아 하나의 RS 프레임을 형성한다. 해당 세컨더리 RS 프레임 디코더 (6190)는 실제 방송 서비스 등을 위하여 전송되는 세컨더리 RS 프레임을 복호화 한다.
물리적 적응 프로세서 (6200)는 물리적 파라미터 핸들러 (6210), FIC (Fast Channel Information) 핸들러 (6220), 물리적 적응 컨트롤 신호 핸들러 (6230), 프라이머리 RS 프레임 핸들러 (6240), 세컨더리 RS 프레임 핸들러 (6250) 및/또는 모바일 트랜스포트 패킷 핸들러 (6260)를 포함할 수 있다.
물리적 파라미터 핸들러 (6210)는 물리적 적응 프로세서 (6200)에 포함될 수 있는 모듈들이 필요로 하는 베이스 밴드 정보를 받아 처리한다. 해당 정보는 TPC (Transport Parameter Channel)의 형태로 전송되며, 이 정보를 이용하여 베이스 밴드 프로세서 (6100)에서 전달받는 FIC 데이터 등의 처리를 수행할 수 있다.
FIC (Fast Channel Information) 핸들러 (6220)는 베이스 밴드 프로세서 (6100)로부터 전달받는 FIC 데이터를 물리적 파라미터 핸들러 (6210)로부터 전달받은 TPC 데이터와 연관하여 처리한다.
물리적 적응 컨트롤 신호 핸들러 (6230)는 FIC 핸들러 (6220)를 통하여 전달받은 FIC 데이터, 그리고 RS 프레임을 통하여 전달받은 SI (Service Information) 데이터들을 모아 물리적 신호로부터 IP 데이터그램 (Datagram) 및 모바일 방송 서비스의 접속 정보를 구성 및 처리하여 저장부 (6340)에 저장하는 역할을 한다.
프라이머리 RS 프레임 핸들러 (6240)는 베이스 밴드 프로세서 (6100)의 프라이머리 RS 프레임 디코더 (6180) 로부터 전달받은 프라이머리 RS 프레임을 각 열 (row) 단위로 구분하여 모바일 트랜스포트 패킷을 구성하고, 이를 모바일 트랜스포트 패킷 핸들러 (6260)로 출력한다.
세컨더리 RS 프레임 핸들러 (6250)는 베이스 밴드 프로세서 (6100)의 세컨더리 RS 프레임 디코더 (6190) 로부터 전달받은 세컨더리 RS 프레임을 각 열 (row) 단위로 구분하여 모바일 트랜스포트 패킷을 구성하고, 이를 모바일 트랜스포트 패킷 핸들러 (6260)로 출력한다.
모바일 트랜스포트 패킷 핸들러 (6260)는 프라이머리 RS 프레임 핸들러 (6240) / 세컨더리 RS 프레임 핸들러 (6250)로부터 전달받은 모바일 트랜스포트 패킷의 각 헤더 (Header) 를 추출하여 해당 모바일 트랜스포트 패킷이 포함하고 있는 데이터를 판단한다. 해당 데이터가 물리적 적응 데이터의 일종인 SI 데이터일 경우, 물리적 적응 컨트롤 신호 핸들러 (6230)로 출력하고, IP 데이터그램일 경우, IP 네트워크 스택 (6310)으로 출력한다.
매니지먼트 프로세서 (6300)는 IP 네트워크 스택 (6310), 파일 핸들러 (6320), ESG 핸들러 (6330), 저장부 (6340), ESG 핸들러 (6350), 스트리밍 핸들러 (6360) 및/또는 SI 핸들러 (6370)을 포함할 수 있다.
IP 네트워크 스택 (6310)은 IP 데이터그램 형태로 전송되는 방송 데이터를 처리하기 위한 UDP, RTP, RTCP, ALC/LCT, FLUTE 등을 처리한다. 각 데이터가 스트리밍 데이터일 경우 스트리밍 핸들러 (6360)로, 파일 형태의 데이터일 경우 파일 핸들러 (6320)로 출력한다.
파일 핸들러 (6320)는 ALC/LCT, FLUTE 구조에 따른 오브젝트 (Object) 형태로 전달받은 데이터를 모아 파일 형태로 구성하며, 해당 파일이 ESG (Electronic Service Guide)를 포함하고 있을 경우 ESG 핸들러 (6330)로 출력하고, 그 외의 파일 기반 서비스를 위한 데이터일 경우 프리젠테이션 프로세서 (6400)로 출력한다.
ESG 핸들러 (6330)는 ESG 데이터를 처리하여 저장부 (6340)에 저장하거나, 사용자의 요구가 있을 시 ESG 디코더 (6350)로 출력하여, ESG 데이터의 이용을 하도록 한다.
저장부 (6340)는 물리적 적응 컨트롤 신호 핸들러 (6230) 및/또는 ESG 핸들러 (6330)로부터 전달받은 방송 서비스 정보 (System Information)를 저장하는 역할을 한다. 저장부 (6340) 는 사용자의 요구가 있을 시, 저장된 데이터를 각 부로 전달한다.
ESG 디코더 (6350)는 저장부 (6340)에 저장된 ESG 데이터 또는 ESG 핸들러 (6330)로부터 전달받은 ESG 데이터를 복원하여 사용자에게 출력할 수 있는 포맷으로 프리젠테이션 컨트롤러 (6410)로 출력한다.
스트리밍 핸들러 (6360)는 RTP, RTCP 구조에 따른 형태로 전달받은 데이터에서 A/V 스트림을 추출하여 A/V 디코더 (6440)로 출력한다.
SI 핸들러 (6370)는 SSC (Service Signaling Channel)을 통해 전송되는 SI 정보를 처리한다. 모바일 방송 수신기는 SMT (Service Map Table)을 통하여 서비스를 구성하는 컴포넌트 스트림 (Component Stream)에 대한 정보를 획득하며, 이 정보는 메모리 혹은 저장부 (6340)에 저장된 후에 이용될 수도 있고, SI 핸들러 (6370)로부터 프리젠테이션 컨트롤러 (6410) 등 다른 컨트롤러로 전달되어 이용될 수도 있다. 한편, 프리젠테이션 컨트롤러 (6410)는 서비스를 구성하는 다양한 미디어 컴포넌트의 속성에 따라서 이들 미디어를 적절히 디코딩 및 후처리하여 사용자에게 표출할 수 있다.
프리젠테이션 프로세서 (6400)는 프리젠테이션 컨트롤러 (6410), 채널 서비스 매니저(6420), 어플리케이션 매니저 (6430), A/V 디코더 (6440), 3D 포맷 컨버터 (6450) 및/또는 3D 디스플레이 모듈 (6460)을 포함할 수 있다.
프리젠테이션 컨트롤러 (6410)는 모바일 방송 시스템을 통하여 전송 받은 데이터를 사용자에게 출력하는 모듈들을 컨트롤하는 역할을 수행한다.
채널 서비스 매니저(6420)는 채널 맵 관리, 채널 서비스 접속 등 사용자가 채널 기반으로 전송되는 방송 서비스를 이용할 수 있도록 하기 위하여 사용자와 인터페이스하는 역할을 수행한다.
어플리케이션 매니저 (6430)는 ESG 디스플레이, 혹은 그 이외의 채널 서비스가 아닌 어플리케이션 서비스 이용을 위하여 사용자와 인터페이스하는 역할을 수행한다.
A/V 디코더 (6440)는 스트리밍 핸들러 (6360)로부터 전달받은 데이터를 각 포맷에 맞도록 복원하여 오디오 및 비디오 신호를 복호한다.
3D 포맷 컨버터 (6450) A/V 디코더 (6440)에서 수신되는 비디오 신호 (side-by-side 또는 top-and-bottom)을 입력 받아서 3D 디스플레이에 출력하기 위한 픽셀 맵핑 (pixel mapping) 작업을 수행한다. 이를 위해 현재 디코딩되어 출력할 비디오의 포맷 정보를 프리젠테이션 컨트롤러 (6410) (또는 SI 핸들러) 로부터 수신해 포맷 컨버젼 (format conversion) 작업 모드를 결정한다.
3D 디스플레이 모듈 (6460)은 A/V 디코더 (6440)에서 복원한 오디오 및 비디오 신호를 사용자에게 디스플레이한다.
도 7은 본 발명의 일 실시예에 따른, 3차원 방송 영상을 수신 처리하는 방법을 나타낸 순서도이다.
모바일 방송 수신기는 3차원 방송 영상을 위한 좌영상 및 우영상을 포함하고, 상기 3차원 방송 영상을 시그널링하기 위한 서비스 시그널링 채널을 포함하는 방송 신호를 수신한다(s7010).
모바일 방송 수신기는 서비스 시그널링 채널에 포함되는 서비스 맵 테이블 (SMT) 을 파싱하고, 파싱된 SMT에서, 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었는지를 가리키는 컴포넌트 타입 정보를 파싱하고, 컴포넌트 타입 정보가 방송 신호에 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었음을 나타내는 경우, SMT에서 하나의 비디오 프레임의 특정 영역을 통하여 좌영상을 구성하는 좌영상 이미지 또는 우영상을 구성하는 우영상 이미지가 전송되는지 가리키는 좌/우영상 이미지 정보를 파싱한다(s7020). 이때, 좌영상 이미지 및 우영상 이미지 중 적어도 어느 하나가 상기 비디오 프레임 내에서 뒤집어져 전송되는지 여부를 가리키는 3차원 이미지 방향 정보를 더 파싱할 수 있다.
모바일 방송 수신기는 파싱된 좌/우영상 이미지 정보에 따라, 상기 좌영상 이미지와 우영상 이미지를 3차원 영상 이미지로 포맷팅한다(s7030).
모바일 방송 수신기는 3차원 영상 이미지를 디스플레이한다(s7040).
이상에서 설명한 본 발명 따르면, 3DTV 신호를 구성하는 필수 요소들은 좌영상 및 우영상에 해당하는 두 개의 비디오 스트림이며 이 중 하나는 2D legacy device와의 호환성을 가지도록 시그널링할 수 있다.
또한, 본 발명에 따르면, 대역폭의 제약에 의해 다른 시점의 영상 데이터를 풀 레졸루션으로 전송하기 어려운 경우, 효과적인 압축을 위해 하프 레졸루션으로 전송하고, 이를 디코딩하는 데에 필요한 정보를 효과적으로 전송할 수 있다.
또한, 본 발명에 따르면, PSI, PSIP 및/또는 DVB SI 체계를 이용해 3D 방송 서비스를 위해 추가적으로 전송되는 비디오 데이터에 대한 signaling 및 해당 데이터에 대한 정보를 전송할 수 있다.
아울러 추가적인 데이터 (secondary video)에 대한 resolution 정보, 코덱 정보, resizing 할 때 권장하는 필터링 기술에 대한 정보 등을 signaling 함으로써 수신기가 보다 양질의 3D 서비스를 제공할 수 있는 방법을 제공한다.
본 발명에 따른 방법 발명은 모두 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
발명의 실시를 위한 형태
발명의 실시를 위한 형태는 최선의 실시예로 전술되었다.
산업상 이용가능성
전술한 바와 같이, 본 발명은 3D 방송 서비스를 수신 처리하는 모바일 방송 시스템에 적용될 수 있다.

Claims (10)

  1. 3차원 방송 영상을 위한 좌영상 및 우영상을 포함하고, 상기 3차원 방송 영상을 시그널링하기 위한 서비스 시그널링 채널을 포함하는 방송 신호를 수신하는 튜너;
    상기 서비스 시그널링 채널에 포함되는 서비스 맵 테이블 (SMT) 을 파싱하고, 상기 파싱된 SMT에서, 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었는지를 가리키는 컴포넌트 타입 정보를 파싱하고, 상기 컴포넌트 타입 정보가 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었음을 나타내는 경우, 상기 SMT에서 하나의 비디오 프레임의 특정 영역을 통하여 좌영상을 구성하는 좌영상 이미지 또는 우영상을 구성하는 우영상 이미지가 전송되는지 가리키는 좌/우영상 이미지 정보를 파싱하는 시스템 정보 핸들러 (handler);
    상기 파싱된 좌/우영상 이미지 정보에 따라, 상기 좌영상 이미지와 우영상 이미지를 3차원 영상 이미지로 포맷팅하는 3차원 영상 포맷터 (formatter); 및
    상기 3차원 영상 이미지를 디스플레이하는 3차원 영상 디스플레이부;
    를 포함하는 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치.
  2. 제 1 항에 있어서, 시스템 정보 핸들러는,
    상기 좌영상 이미지 및 우영상 이미지 중 적어도 어느 하나가 상기 비디오 프레임 내에서 뒤집어져 전송되는지 여부를 가리키는 3차원 이미지 방향 정보를 더 파싱하는 것을 특징으로 하는 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치.
  3. 제 1 항에 있어서,
    상기 수신한 방송 신호에 포함된 기지데이터 열의 위치를 검출하는 기지데이터 열 검출기; 및
    상기 검출된 기지데이터 열의 위치로 상기 방송 신호에 포함된 기지데이터 열을 검출하여, 상기 방송 신호가 전송되는 채널에 대한 채널 등화를 수행하는 채널 등화기;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치.
  4. 제 3 항에 있어서,
    상기 채널 등화가 수행된 후 수신되는 방송 신호에 포함된 데이터에 대하여 트렐리스 복호화를 수행하는 트렐리스 디코더;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치.
  5. 제 4 항에 있어서,
    상기 트렐리스 복호화된 데이터를 리드-솔로몬 (Reed-Solomon; RS) 프레임 단위에서, 에러정정복호화를 수행하는 RS 프레임 디코더;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 모바일 방송 수신 장치.
  6. 3차원 방송 영상을 위한 좌영상 및 우영상을 포함하고, 상기 3차원 방송 영상을 시그널링하기 위한 서비스 시그널링 채널을 포함하는 방송 신호를 수신하는 단계;
    상기 서비스 시그널링 채널에 포함되는 서비스 맵 테이블 (SMT) 을 파싱하고, 상기 파싱된 SMT에서, 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었는지를 가리키는 컴포넌트 타입 정보를 파싱하고, 상기 컴포넌트 타입 정보가 상기 방송 신호에 상기 좌영상 및 우영상을 포함하는 3차원 비디오 스트림이 포함되었음을 나타내는 경우, 상기 SMT에서 하나의 비디오 프레임의 특정 영역을 통하여 좌영상을 구성하는 좌영상 이미지 또는 우영상을 구성하는 우영상 이미지가 전송되는지 가리키는 좌/우영상 이미지 정보를 파싱하는 단계;
    상기 파싱된 좌/우영상 이미지 정보에 따라, 상기 좌영상 이미지와 우영상 이미지를 3차원 영상 이미지로 포맷팅하는 단계; 및
    상기 3차원 영상 이미지를 디스플레이하는 단계;
    를 포함하는 3차원 방송 영상을 수신 처리하는 방법.
  7. 제 6 항에 있어서,
    상기 좌영상 이미지 및 우영상 이미지 중 적어도 어느 하나가 상기 비디오 프레임 내에서 뒤집어져 전송되는지 여부를 가리키는 3차원 이미지 방향 정보를 더 파싱하는 단계;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 방법.
  8. 제 6 항에 있어서,
    상기 수신한 방송 신호에 포함된 기지데이터 열의 위치를 검출하는 단계; 및
    상기 검출된 기지데이터 열의 위치로 상기 방송 신호에 포함된 기지데이터 열을 검출하여, 상기 방송 신호가 전송되는 채널에 대한 채널 등화를 수행하는 단계;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 방법.
  9. 제 8 항에 있어서,
    상기 채널 등화가 수행된 후 수신되는 방송 신호에 포함된 데이터에 대하여 트렐리스 복호화를 수행하는 단계;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 방법.
  10. 제 9 항에 있어서,
    상기 트렐리스 복호화된 데이터를 리드-솔로몬 (Reed-Solomon; RS) 프레임 단위에서, 에러정정복호화를 수행하는 단계;
    를 더 포함하는 3차원 방송 영상을 수신 처리하는 방법.
KR1020137013354A 2010-10-28 2011-10-28 모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법 KR101867824B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US40745210P 2010-10-28 2010-10-28
US61/407,452 2010-10-28
PCT/KR2011/008125 WO2012057564A2 (ko) 2010-10-28 2011-10-28 모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20130096289A true KR20130096289A (ko) 2013-08-29
KR101867824B1 KR101867824B1 (ko) 2018-06-18

Family

ID=45994591

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137013354A KR101867824B1 (ko) 2010-10-28 2011-10-28 모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법

Country Status (5)

Country Link
US (1) US9681117B2 (ko)
KR (1) KR101867824B1 (ko)
CN (1) CN103262548B (ko)
CA (1) CA2815955C (ko)
WO (1) WO2012057564A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047985A1 (ko) * 2014-09-25 2016-03-31 엘지전자 주식회사 3d 방송 신호를 처리하는 방법 및 장치

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101965385B1 (ko) * 2011-10-10 2019-04-03 한국전자통신연구원 융합형 ３ｄｔｖ에서 컨텐츠 스트림에 접근하는 컨텐츠 제공 장치 및 방법, 그리고 컨텐츠 재생 장치 및 방법
US9860515B2 (en) * 2012-12-11 2018-01-02 Electronics And Telecommunications Research Institute Apparatus and method for 3D content broadcasting with boundary information
CN108737810B (zh) * 2018-05-23 2019-08-06 苏州新光维医疗科技有限公司 图像处理方法、装置及三维成像系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070058302A (ko) * 2005-12-02 2007-06-08 한국전자통신연구원 디지털방송 기반 ３차원 컨텐츠 서비스 제공 방법
KR20090079859A (ko) * 2007-08-24 2009-07-22 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
KR20090102116A (ko) * 2008-03-25 2009-09-30 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
US20100141738A1 (en) * 2008-11-04 2010-06-10 Gwang-Soon Lee Method and system for transmitting/receiving 3-dimensional broadcasting service
KR20100092851A (ko) * 2009-02-13 2010-08-23 삼성전자주식회사 3차원 영상 데이터스트림 생성 방법 및 그 장치와 3차원 영상 데이터스트림 수신 방법 및 그 장치

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6785903B1 (en) * 2000-04-05 2004-08-31 K Tech Telecommunications, Inc. Digital television translator with PSIP update
KR100674423B1 (ko) * 2001-01-19 2007-01-29 엘지전자 주식회사 송/수신 시스템 및 데이터 처리 방법
JP4134027B2 (ja) * 2002-04-25 2008-08-13 シャープ株式会社 画像符号化装置、画像復号装置、及び画像記録装置
US7650036B2 (en) * 2003-10-16 2010-01-19 Sharp Laboratories Of America, Inc. System and method for three-dimensional video coding
KR100754202B1 (ko) * 2006-01-26 2007-09-03 삼성전자주식회사 눈동자 검출 정보를 이용하는 입체 영상 표시 장치 및 방법
US8160149B2 (en) * 2007-04-03 2012-04-17 Gary Demos Flowfield motion compensation for video compression
ES2858578T3 (es) * 2007-04-12 2021-09-30 Dolby Int Ab Organización en mosaico en codificación y decodificación de vídeo
KR100993428B1 (ko) * 2007-12-12 2010-11-09 한국전자통신연구원 Ｄｍｂ 연동형 스테레오스코픽 데이터 처리방법 및스테레오스코픽 데이터 처리장치
US9124870B2 (en) * 2008-08-20 2015-09-01 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method providing on screen display applied thereto
US8451320B1 (en) * 2009-01-23 2013-05-28 Next3D, Inc. Methods and apparatus for stereoscopic video compression, encoding, transmission, decoding and/or decompression
BRPI1007163A2 (pt) * 2009-01-26 2018-09-25 Thomson Licensing compactação de quadro para codificação de vídeo
CA2743738A1 (en) * 2010-06-18 2011-12-18 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Multilayer decoding using persistent bits
US10134150B2 (en) * 2010-08-10 2018-11-20 Monotype Imaging Inc. Displaying graphics in multi-view scenes

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070058302A (ko) * 2005-12-02 2007-06-08 한국전자통신연구원 디지털방송 기반 ３차원 컨텐츠 서비스 제공 방법
KR20090079859A (ko) * 2007-08-24 2009-07-22 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
KR20090102116A (ko) * 2008-03-25 2009-09-30 삼성전자주식회사 3차원 영상 컨텐츠 제공 방법, 재생 방법, 그 장치 및 그기록매체
US20100141738A1 (en) * 2008-11-04 2010-06-10 Gwang-Soon Lee Method and system for transmitting/receiving 3-dimensional broadcasting service
KR20100092851A (ko) * 2009-02-13 2010-08-23 삼성전자주식회사 3차원 영상 데이터스트림 생성 방법 및 그 장치와 3차원 영상 데이터스트림 수신 방법 및 그 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016047985A1 (ko) * 2014-09-25 2016-03-31 엘지전자 주식회사 3d 방송 신호를 처리하는 방법 및 장치

Also Published As

Publication number Publication date
US9681117B2 (en) 2017-06-13
US20130222541A1 (en) 2013-08-29
CN103262548A (zh) 2013-08-21
CA2815955C (en) 2017-05-02
WO2012057564A3 (ko) 2012-06-21
CA2815955A1 (en) 2012-05-03
CN103262548B (zh) 2016-05-11
KR101867824B1 (ko) 2018-06-18
WO2012057564A2 (ko) 2012-05-03

Similar Documents

Publication Publication Date Title
US9756380B2 (en) Broadcast receiver and 3D video data processing method thereof
KR100970649B1 (ko) 수신 시스템 및 데이터 처리 방법
KR101694821B1 (ko) 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
US9288469B2 (en) Digital broadcast receiving method providing two-dimensional image and 3D image integration service, and digital broadcast receiving device using the same
US8730303B2 (en) Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
KR101915130B1 (ko) 디지털 방송 신호 수신 장치 및 방법
CA2819141C (en) Receiving device and method for receiving multiview three-dimensional broadcast signal
US9578304B2 (en) Method and apparatus for processing and receiving digital broadcast signal for 3-dimensional subtitle
KR101653319B1 (ko) 3d 영상을 위한 영상 컴포넌트 송수신 처리 방법 및 장치
US9693082B2 (en) Method and device for transmitting/receiving digital broadcast signal
KR20120013974A (ko) 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
US20130028315A1 (en) Three-dimensional image data encoding and decoding method and device
US20120154534A1 (en) Cable broadcast receiver and 3d video data processing method thereof
US20130169753A1 (en) Broadcast receiver and method for processing 3d video data
KR101867824B1 (ko) 모바일 환경에서 3차원 방송 신호를 수신하기 위한 수신 장치 및 방법
KR20150079577A (ko) 다시점 3dtv 서비스에서 에지 방해 현상을 처리하는 방법 및 장치
US9998800B2 (en) 3D broadcast service providing method and apparatus, and 3D broadcast service reproduction method and apparatus for using image of asymmetric aspect ratio

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right