KR101385606B1 - 3차원 스트리밍 방송 수신 방법 및 그 방법을 실행하는 멀티 모드 단말기 - Google Patents

Abstract

본 발명은 3차원 스트리밍 방송 수신 방법 및 그 방법을 실행하는 멀티 모드 단말기에 관한 것으로, 본 발명의 일 실시 예는 3차원 스트리밍 방송을 화질 열화 없이 멀티 모드 단말기에서 수신할 수 있는 효과가 있다.

Description

3차원 스트리밍 방송 수신 방법 및 그 방법을 실행하는 멀티 모드 단말기{Method of receiving 3D streaming broadcast and multi-mode apparatus}

본 발명은 3차원 스트리밍 방송 수신 방법 및 그 방법을 실행하는 멀티 모드 단말기에 관한 것이다.

지상파는 각 방송국에서 전송하는 하나의 특정 정보만을 접할 수 있는 반면, 스트리밍 서비스는 방송국의 서버에 저장된 정보를 사용자의 요구에 따라 선택적으로 접근할 수 있다는 데에 장점이 있다. 스트리밍 서비스는 네트워크 대역폭의 한계 때문에 사용자들의 요구를 충족시키기 어려웠으나, 컴퓨터 네트워크가 발전하면서 인터넷을 기반으로 한 스트리밍 방송이 증가하고 있다.

멀티 모드 서비스란 향후 이동통신에서 2G, 3G, 4G, b4G (Beyond 4G) 통신 방식을 통합하여 상황에 맞게 다양한 모드로 전환 서비스할 수 있는 방식을 말한다.

본 발명의 실시 예들은, 3차원 영상을 제공함에 있어서 화질 성능 차이를 크게 느끼지 않게 시각적 손실을 거의 주지 않은 채 대역폭 효율을 높일 수 있는 3차원 스트리밍 방송 수신 방법 및 그 방법을 실행하는 멀티 모드 단말기를 제공하고자 한다.

본 발명의 일 실시 예의 일 측면에 따르면, 제 1 콘텐츠를 수신하는 제 1 RF 수신부; 제 2 콘텐츠를 수신하는 제 2 RF 수신부; 상기 제1 콘텐츠 및 상기 제2 콘텐츠를 합성하여 3차원 합성 콘텐츠를 생성하는 합성부; 및 상기 3차원 합성 콘텐츠의 혼합된 화질의 화질열화를 보상할 수 있는 화질 열화 보상부를 포함하고, 상기 제1 콘텐츠 및 상기 제 2 콘텐츠 중 하나의 콘텐츠는 제 1 통신망으로 수신하고, 다른 하나의 콘텐츠는 제 2 통신망으로 수신하는 것을 특징으로 하는 멀티 모드 단말기가 제공된다.

상기 제 1 통신망은 CDMA, GSM, WCDMA , WIBRO, LTE, 또는 LTE 어드밴스 중 어느 하나에 대응되는 망이며,, 상기 제 2 통신망은 상기 제 1 통신망과 다른 망에 대응되는 것을 특징으로 멀티 모드 단말기가 제공된다.

상기 화질 열화 보상부는 MVC 또는 SVC중 하나의 알고리즘을 적용하는 것을 특징으로 하는 멀티 모드 단말기가 제공된다.

상기 MVC 또는 SVC 중 하나의 알고리즘의 인코딩을 통한 부가 정보를 상기 제 1 통신망 및 제 2 통신망과 다른 제 3 통신망으로 수신하는 것을 특징으로 하는 멀티 모드 단말기가 제공된다.

본 발명의 일 실시 예의 다른 측면에 따르면, 제 1 콘텐츠를 수신하는 단계;

제 2 콘텐츠를 수신하는 단계; 상기 제1 콘텐츠 및 상기 제2 콘텐츠를 합성하여 3차원 합성 콘텐츠를 생성하는 단계; 상기 3차원 합성 콘텐츠의 혼합된 화질의 화질열화를 보상하는 단계를 포함하고, 상기 제1 콘텐츠 및 상기 제 2 콘텐츠 중 하나의 콘텐츠는 제1통신망으로 수신하고, 다른 하나의 콘텐츠는 제 2 통신망으로 수신하는 것을 특징으로 하는 3차원(3D) 스트리밍 방송을 수신하는 방법이 제공된다.

상기 제 1 통신망은 CDMA, GSM, WCDMA , WIBRO, LTE, 또는 LTE 어드밴스 중 어느 하나에 대응되는 망이며, 상기 제 2 통신망은 상기 제 1 통신망과 다른 망에 대응되는 것을 특징으로 3차원(3D) 스트리밍 방송을 수신하는 방법이 제공된다.

상기 화질열화를 보상하는 단계는 MVC 또는 SVC중 하나의 알고리즘을 적용하는 것을 특징으로 하는 3차원(3D) 스트리밍 방송을 수신하는 방법이 제공된다.

상기 MVC 또는 SVC 중 하나의 알고리즘의 인코딩을 통한 부가 정보를 상기 제 1 통신망 및 제 2 통신망과 다른 제 3 통신망으로 수신하는 것을 특징으로 하는 3차원(3D) 스트리밍 방송을 수신하는 방법이 제공된다.

본 발명의 일 실시 예에 따르면, 3차원 스트리밍 방송을 화질 열화 없이 멀티 모드 단말기에서 수신할 수 있는 효과가 있다.

도 1은 멀티 모드 서비스를 이용한 3차원 스트리밍 서비스 시스템의 개략적인 블록도를 도시한 도면이다.
도 2는 본 발명의 일 실시 예에 따른 멀티 모드 서비스를 이용한 융합형 3차원 스트리밍 서비스 블록도를 도시한 도면이다.
도 3 는 본 발명의 일 실시 예에 따른 멀티 모드 단말기의 개략적인 구조를 도시한 도면이다.
도 4 은 본 발명의 일 실시 예에 따른 3차원 스트리밍 방송 수신 방법을 나타낸 흐름도이다.

본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 구성요소들은 용어들에 의해 한정되어서는 안 된다. 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.

이하, 본 발명의 실시 예들은 첨부도면을 참조하여 상세히 설명하기로 하며, 첨부 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성 요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.

도 1은 멀티 모드 서비스를 이용한 3차원 스트리밍 서비스 시스템의 개략적인 블록도를 도시한 도면이다.

멀티 모드 서비스를 이용한 3차원 스트리밍 서비스 시스템은 3D 데이터를 전송하는 3차원 스트리밍 서버(100a)와 이를 수신하는 멀티 모드 단말기(200a) 등으로 구성된다.

멀티 모드 서비스란 향후 이동통신에서 2G, 3G, 4G 통신 방식을 통합하여 상황에 맞게 다양한 모드로 전환 서비스할 수 있는 방식을 말한다.

스트리밍은 소리 및 동영상 등의 멀티미디어 콘텐츠를 전송 및 재생하기 위한 방식 중 하나이다. 클라이언트는 스트리밍을 통해 콘텐츠을 수신하는 동시에 상기의 콘텐츠를 재생할 수 있다. 스트리밍은 적응적 스트리밍과 융합형 스트리밍이 있는데, 본 발명은 융합형 스트리밍에 적용된다.

융합형 스트리밍 서비스는 제 1 통신망으로는 제 1 콘텐츠를 전송하고, 또 다른 제 2 통신망으로는 제 2 콘텐츠를 전송함으로써 3차원 영상을 재생하기 위한 방법을 말한다.

일 예로, 4G 통신망과 3G 통신망을 이용하여 스테레오스코픽 영상을 전송한다고 가정하면, 좌안 영상을 4G 통신망으로 전송하고, 우안 영상을 3G 통신망으로 전송함으로써(또는 반대) 3차원 영상을 재생할 수 있다. 스테레오스코픽 영상에서는 좌안 영상과 우안 영상이 본 발명의 제 1 콘텐츠 또는 제 2 콘텐츠가 될 수 있다.

따라서, 3D 스트리밍 서버(100a)는 멀티 모드 서비스를 이용하여 제 1 통신망으로 제 1 콘텐츠를 전송하고 제 2 통신망으로 제 2 콘텐츠를 전송할 수 있다.

멀티 모드 단말기(200a)에서는 서로 다른 통신망으로부터 들어오는 신호들을 수신할 수 있다. 더욱 상세하게는, 서로 다른 두 개의 시스템과의 통신이 가능한 단말기를 듀얼모드 단말기라 한다. 예를 들면 CDMA(GSM) 시스템과 WCDMA 시스템을 통한 통신이 모두 가능한 단말기를 듀얼 모드 단말기라고 한다. 한편, 세 가지 시스템을 통한 통신이 가능한 단말기를 트리플 모드 단말기라고 한다. 본 명세서에서는 두 가지 이상의 시스템을 통한 통신이 가능한 단말기를 통칭하여 멀티 모드 단말기(200a) 라고 칭한다.

도 2는 본 발명의 일 실시 예에 따른 멀티 모드 서비스 이용한 융합형 3차원 스트리밍 서비스 블록도를 도시한 도면이다.

멀티 모드 단말기(200b)는, 카메라폰, PDA(personal digital assistant), PMP(portable multimedia player), 캠코더 등과 같은 모바일 장치로 구현될 수 있다. 또한 본 발명의 일 실시 예에 따른 멀티 모드 단말기(200b)는, TV, 모니터 등과 같은 디스플레이 장치로 구현될 수 있다.

일 예로, 멀티 모드 단말기(200b)는 3차원 영상을 표시하는 장치로써, 두 개의 카메라 센서를 사용하여 3차원 영상을 생성함으로써 스테레오스코픽 컨텐츠를 생성한다. 더욱 상세하게는, 3차원 영상을 지원하는 멀티 모드 단말기(200b)는 예컨대, 두 개의 카메라 센서를 사용하여 좌안 영상과 우안 영상을 획득하고, 이들 영상들을 인코더를 통해 인코딩하여 스테레오스코픽 콘텐츠 파일을 생성한다. 이 경우, 두개의 좌안 영상과 우안 영상은 하나의 피사체를 촬영하여 얻어지는 영상들이다.

기본적으로 스테레오스코픽에 기반한 3차원 스트리밍 서비스를 제공하기 위해, 3D 스트리밍 서버(100b) 는 좌안 영상 및 우안 영상인 두 개의 영상 정보가 필요하고, 이를 전송하기 위해 2배의 대역폭이 필요하다. 만일 하나의 경로로 스테레오스코픽 영상을 전송하고자 하면, 단말기는 2차원 영상에 비해 절반의 수준으로 열화된 3차원 영상을 제공할 수밖에 없다. 이러한 한계를 극복하기 위해, 본 발명은 멀티 모드 서비스를 이용하여 스테레오스코픽에 기반한 3차원 서비스를 제공하기 위한 방법을 제안한다.

도 2는 본 발명의 일 실시 예에 해당하는 것으로, 스테레오스코픽에 기반한 3차원 서비스를 제공하기 위해서, 3D 스트리밍 서버(100b)는 두 개의 영상 정보인 제 1 콘텐츠(102) 와 제 2 콘텐츠(104)를 송신한다. 이때 제 1 콘텐츠와 제 2 콘텐츠는 2D 영상이고, 좌안 영상과 우안 영상에 해당하는 것을 특징으로 한다.

상기 3D 스트리밍 서버는 각각의 콘텐츠를 각각 다른 통신망을 통해서 송신하여 멀티 모드 단말기(200b)가 수신하도록 한다. 이때 제 1 통신망과 제 2 통신망을 사용하므로 멀티 모드 서비스를 이용한다고 한다. 상기 제 1 통신망과 제 2 통신망은 상기 멀티 모드 단말기(200b)가 수신하도록 지원가능한 통신망들을 의미하는 것으로, 2G 3G 및 4G중 적어도 어느 하나를 포함하는 것을 특징으로 한다.

G는 Generation 즉 세대를 뜻하는 말로 1세대(1G), 2세대(2G), 3세대(3G), 4세대(4G)를 이르는 말이다. 1세대(1G)는 아날로그방식의 통신기술을 의미하고, 2세대(2G)는 GSM과 CDMA방식, 3세대(3G) 는WCDMA 나 CDMA(Code Division Multiple Access) 방식이 있다. 또한, 4세대(4G,b4G(Beyond 4G)) 는 WIBRO나 LTE 또는 LTE 어드밴스 방식이 존재한다. 3세대와 4세대의 차이는 대역폭, 다중안테나 채택 여부, 변조 방식 등의 다양한 조건에 따라 존재한다.

멀티 모드 단말기(200b)에서는, 상기 2G, 3G, 4G, b4G(Beyond4G) 중 서로 다른 통신망으로부터 들어오는 제1 콘텐츠(202)와 제 2 콘텐츠(204)를 융합하여 3차원 합성 콘텐츠(206)로 통합하는 것을 주 발명으로 한다.

도 3 는 본 발명의 일 실시 예에 따른 멀티 모드 단말기의 개략적인 구조를 도시한 도면이다.

본 발명의 일 실시 예의 일 측면에 따른 멀티 모드 단말기(300)는 제 1 RF 수신부(310), 제 2 RF 수신부(330), 합성부(350), 화질 열화 방지부(370) 를 포함할 수 있다.

제 1 RF 수신부(310) 는 3D 스트리밍 서버(100b)로부터 제 1 통신망을 통해서 송신된 제 1 콘텐츠를 수신한다. 또한 제 2 RF 수신부(330)는 3D 스트리밍 서버(100b)로부터 제 2 통신망을 통해서 송신된 제 2 콘텐츠를 수신한다.

상기 제 1 통신망과 제 2 통신망은 상기 멀티 모드 단말기(200b)가 수신하도록 지원가능한 통신망들을 의미하는 것으로, 2G 3G 및 4G, b4G(Beyond 4G) 중 적어도 어느 하나를 포함하는 것을 특징으로 한다. 또한 제 1 통신망과 제 2 통신망은 서로 다른 것을 특징으로 한다.

제 1 RF 수신부(310) 및 제 2 RF 수신부(330)은 예를 들면, 주로 Si BJT/BiCMOS 및 GaAs MESFET 기술이 지배적으로 이용되고 있으며 Silicon 기술은 수백 MHz대의 무선 주파수를 사용한 무선(cordless) 전화기나 High Level 집적화 및 저가격 칩화를 위한 GSM(Global System for Mobile Communication) 시스템에 응용되고, GaAs 기술은 수 GHz 이상의 주파수 대에서 TDMA(Time Division Multiple Access, IS-136), CDMA(Code Division Multiple Access), 개인 휴대용 단말기 및 Wireless Local Area Network 등에 주로 이용되고 있다. 다만, 본원 발명은 상기의 구성만으로 한정되지는 않는다.

또한 상기 멀티 모드 단말기(300)는 상기 수신된 신호들을 해당 처리 모듈을 통해 프로세싱하는 각각의 모뎀도 포함할 수 있다. 이때 제 1 모뎀 및 제 2 모뎀은 단일 칩으로 구성된 모뎀 칩이거나 칩 내의 DSP일 수 있다.

합성부(350)는 상기 제 1 RF 수신부(310)로 수신된 제 1 콘텐츠와 제 2 RF 수신부(330)로 수신된 제 2 콘텐츠를 합성하여 3차원 합성 콘텐츠를 생성한다.

더욱 자세하게는, 합성부(350)에서는 스테레오스코픽 카메라를 통해 획득한 좌안 영상, 우안 영상인 2차원 영상을 합성하여 3차원 합성 콘텐츠를 생성할 수 있다. 상기 좌안 영상 또는 우안 영상은 상기 제 1 RF 수신부(310) 또는 제 2 RF 수신부(330)에서 수신된 제 1 콘텐츠 또는 제 2 콘텐츠일 수 있다. 상기 합성 방법은 매우 다양하나, 현재시장에서 많이 활용되는 방법으로는 크게 하나의 기초스트림 (elementary stream: ES) 또는 두 개의 기초 스트림을 기반으로 한 방법들이 있다. 하나의 기초 스트림을 기반으로 한 영상 구성 방법은 화면분할(side-by-side), 격렬 주사(line interleaved) 및 순차 프레임(frame sequential)등을 통해 좌, 우 영상을 하나의 합성된 영상 (compound Image)으로 구성하는 방법이고, 두 개의 기초스트림을 기반으로 한 구성방법은 좌, 우 영상을 각각 독립된 스트림으로 구성하는 방법이다. 다만, 본원 발명은 상기의 구성만으로 한정되지는 않는다.

화질 열화 방지부(370)는 3차원 합성 콘텐츠의 혼합된 화질의 화질열화를 보상할 수 있다. 예를 들면, 4G 통신망으로부터 받은 좌안 영상은 고화질의 스트리밍 서비스를 제공할 수 있고, 3G 통신망으로부터 받는 우안 영상은 저화질의 스트리밍 서비스가 가능하다. 제안한 방법은 통신망 환경상 혼합된 화질을 갖는 3차원 스트리밍 서비스가 불가피한데, 이는 물리적인 제약일 뿐, 3차원 영상의 주관적 화질은 Binocular suppression theory에 의해 고화질 영상을 따라간다.

이는 L. Stelmach et al, ” Stereo Image Quality: Effects of Mixed Spatio-Temporal Resolution,” IEEE Trans. Circuits Syst. Video Technol, vol. 10, no.2, March.2000,pp.188-193에 명시되어 있다. 그러나, 화질차이가 심한 경우, 주관적 화질도 열화 될 수 있는데, 이것은 MVC, SVC, 알고리즘 등을 통해 우안 영상의 화질을 개선함으로써 극복할 수 있다.

H.264/AVC에 기초하여 새로운 비디오 코딩 표준들을 개발하려는 노력들이 있어 왔다. 하나의 이러한 표준은 스케일러블 비디오 코딩 (SVC) 표준인데, 이는 H.264/AVC의 스케일러블 확장물이다. 다른 표준은 멀티-뷰 비디오 코딩 (MVC) 인데, 이는 H.264/AVC의 멀티뷰 확장물이다.

MVC는 다시점 비디오 코딩 (Multiview Video Coding) 3D 영상 코딩 기술로, 두 대 이상의 카메라를 통해 촬영된 영상물을 기하학적으로 교정하고 공간적으로 합성하여 여러 방향의 시점을 사용자에게 제공하는 3차원 영상처리 기술을 의미하는 것이다.

본 발명의 일 실시 예에 따른 멀티 모드 단말기(300)는 MVC 알고리즘을 탑재할 수 있으며, 제1 통신망을 통해 수신한 제1 콘텐츠와 제2 통신망을 통해 수신한 제2 콘텐츠를 MVC 알고리즘을 통해 디코딩하여 합성 콘텐츠를 생성할 수 있다. 여기서, 제1 콘텐츠와 제2 콘텐츠의 압축률은 다를 수 있다.

일 실시예로 제 1 콘텐츠는 좌안 영상이고 제 2 콘텐츠는 우안 영상일 때, 좌안 영상을 4G 통신망을 통해서 송수신하고, 우안 영상을 3G 통신망을 통해서 송수신을 할 때는, 4G 와 3G는 대역폭의 차이로 인하여 4G 통신망을 통하여 송 수신되는 좌안 영상이 3G 통신망을 통하여 송 수신되는 우안 영상보다 고화질이게 된다. 따라서 멀티 모드 단말기(300)에서 상기 수신된 영상들을 디코딩하여 합성할 때, 혼합된 화질을 가질 수밖에 없게 된다. 이러한 혼합된 화질의 열화를 방지하기 위해서 화질 열화 보상부(370) 에서 MVC 알고리즘을 탑재하여, 3D 스트리밍 서버에서 2D 영상 즉 제 1 콘텐츠와 제 2 콘텐츠를 각각 다른 통신망으로 송신하기 전에, 3G 통신망으로 송신하는 제 2 콘텐츠의 압축률을 낮게 하여 인코딩하여 전송함으로써, 멀티 모드 단말기(300)에서 4G 통신망으로 전송된 제 1 콘텐츠와 유사한 화질을 가질 수 있도록 한다.

또한, 상기 제 1 콘텐츠와 제 2 콘텐츠 중 하나의 품질이 너무 열악한 경우, SVC 나 MVC 인코딩을 통한 부가 정보를 멀티 모드 단말기(300)의 수신단에 보내줘야 하는데, 상기 부가 정보를 상기 제 1 통신망과 상기 제 2 통신망을 통해서 송신할 경우 이에 따른 또 다른 대역폭이 필요하고, 이에 따라서 제 1 콘텐츠 및 제 2 콘텐츠의 2D 정보의 화질 열화가 생기게 된다.

따라서, 상기 부가 정보는 제 1 통신망과 제 2 통신망과는 다른 제 3 통신망을 통해서 전송함으로써, 2D신호의 화질 열화를 방지할 수 있게 된다.

도 4 은 본 발명의 일 실시 예에 따른 3차원 스트리밍 방송 수신 방법을 나타낸 흐름도이다.

우선 멀티 모드 단말기에서 제 1 콘텐츠를 제 1 통신망을 통해서 수신한다(S100). 상기 제 1 콘텐츠는 3D 스트리밍 서버로부터 송신된 신호를 제 1 RF 수신기를 통해서 수신받을 수 있다. 상기 제 1 콘텐츠는 스트레오스코픽에서 좌안 영상 또는 우안 영상 중 하나일 수 있다. 따라서 2D 영상이다. 상기 제1 통신망은 멀티 모드 단말기가 수신할 수 있는 통신망들 중 하나를 포함한다.

다음으로 멀티 모드 단말기에서 제 2 콘텐츠를 제 2 통신망을 통해서 수신한다(S102). 구체적으로 상기 제 2 콘텐츠는 3D 스트리밍 서버로부터 송신된 신호를 제 2 RF 수신기를 통해서 수신 받을 수 있다. 상기 제 2 콘텐츠는 스트레오스코픽에서 좌안 영상 또는 우안 영상 중 제 1 콘텐츠가 아닌 영상이다. 따라서 2D 영상이다. 또한 상기 제 2 통신망은 멀티 모드 단말기가 수신할 수 있는 통신망들 중 제 1 통신망과는 다른 통신망들 중 하나를 포함한다.

상기 제 1 콘텐츠와 제 2 콘텐츠를 합성하여(S104) 3차원 합성 콘텐츠를 생성한다. 3차원 합성 콘텐츠는 각각 다른 통신망으로 수신된 각각 다른 2D 영상을 스테레오스코픽방식으로 합성한다. 스테레오스코픽 방식은 좌안 영상과 우안 영상을 합성하여 3D 입체 영상을 생성하는 방식을 말한다.

다음으로, 3차원 합성 콘텐츠의 혼합된 화질의 화질 열화를 보상한다(S106).

본 발명의 일 실시 예에 따라, 제 1 콘텐츠와 제 2 콘텐츠는 서로 다른 통신망을 통해서 수신이 되었는데, 상기 통신망의 대역폭이나 접속 방식들이 서로 상이한바, 수신된 제 1 콘텐츠와 제 2 콘텐츠는 서로 다른 화질을 가질 수밖에 없게 된다. 또한 이러한 서로 다른 화질을 가진 제 1 콘텐츠와 제 2 콘텐츠를 서로 합성하여 생성된 3차원 합성 콘텐츠는 혼합된 화질을 가지게 된다. 하지만, 이러한 것은 물리적 제약 일뿐, 3 차원 합성 콘텐츠의 주관적 화질은 결국 고화질 콘텐츠의 것을 따르게 되기 때문에 큰 문제는 되지 않는다. 다만, 화질 차이가 심할 경우에는 혼합된 화질의 화질 열화를 보상하는 단계가 필요한데, 이는 MVC 나 SVC의 알고리즘을 탑재한 경우에 가능하다.

MVC 알고리즘의 경우에는, 서로 다른 통신망을 통해서 송 수신된 콘텐츠 중에서 저화질을 가지는 콘텐츠는, 3D 스트리밍 서버에서 송신하기 전에 압축률을 낮게 하여 인코딩하여 통신망으로 전송시킴으로써, 멀티 모드 단말기에서 서로 다른 화질을 가지는 제 1 콘텐츠와 제 2 콘텐츠를 디코딩하여 합성할 때, 화질 열화를 방지할 수 있게 된다.

또한, 상기 제 1 콘텐츠와 제 2 콘텐츠 중 하나의 품질이 너무 열악한 경우, SVC 나 MVC 인코딩을 통한 부가 정보를 멀티 모드 단말기(300)의 수신단에 보내줘야 하는데, 상기 부가 정보를 상기 제 1 통신망과 상기 제 2 통신망을 통해서 송신할 경우 이에 따른 또 다른 대역폭이 필요하고, 이에 따라서 제 1 콘텐츠 및 제 2 콘텐츠의 2D 정보의 화질 열화가 생길 수 있다.

따라서, 상기 부가 정보는 상기 제 1 통신망 및 상기 제 2 통신망과는 다른 제 3 통신망을 통해서 전송함으로써, 2D신호의 화질 열화를 방지할 수 있게 된다.

본 발명에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 저장부(permanent storage), 외부 장치와 통신하는 통신 포트, 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다. 소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 저장 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 저장 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 프로세서에서 실행될 수 있다.

본 발명에서 인용하는 공개 문헌, 특허 출원, 특허 등을 포함하는 모든 문헌들은 각 인용 문헌이 개별적으로 및 구체적으로 병합하여 나타내는 것 또는 본 발명에서 전체적으로 병합하여 나타낸 것과 동일하게 본 발명에 병합될 수 있다.

본 발명의 이해를 위하여, 도면에 도시된 바람직한 실시 예들에서 참조 부호를 기재하였으며, 본 발명의 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 특정 용어에 의해 본 발명이 한정되는 것은 아니며, 본 발명은 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다.

본 발명은 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 발명은 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 본 발명은 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 발명은 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. "매커니즘", "요소", "수단", "구성"과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.

본 발명에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 본 발명의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, "필수적인", "중요하게" 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.

본 발명의 명세서(특히 특허청구범위에서)에서 "상기"의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 본 발명에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 발명의 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 본 발명에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 본 발명이 한정되는 것은 아니다. 본 발명에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 본 발명을 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 본 발명의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.

100a, 100b: 3D 스트리밍 서버 200a, 200b, 300: 멀티 모드 단말기
102,202: 제 1 콘텐츠
104,204: 제 2 콘텐츠
206: 3차원 합성 콘텐츠
310: 제 1 RF 수신부 330: 제 2 RF 수신부
350: 합성부 370: 화질 열화 방지부

Claims (8)

1. 3차원 스트리밍 방송 수신하는 멀티 모드 단말기에서
   제 1 콘텐츠를 수신하는 제 1 RF 수신부;
   제 2 콘텐츠를 수신하는 제 2 RF 수신부;
   상기 제1 콘텐츠 및 상기 제2 콘텐츠를 합성하여 3차원 합성 콘텐츠를 생성하는 생성부; 및
   상기 3차원 합성 콘텐츠의 혼합된 화질의 화질열화를 보상할 수 있는 화질열화보상부를 포함하고,
   상기 제1 콘텐츠 및 상기 제 2콘텐츠 중 하나의 콘텐츠는 제1통신망으로 수신하고, 다른 하나의 콘텐츠는 제2통신망으로 수신하고,
   상기 화질 열화 보상부는 MVC 또는 SVC중 하나의 알고리즘을 적용하고,
   상기 MVC 또는 SVC 중 하나의 알고리즘의 인코딩을 통한 부가 정보를 상기 제 1 통신망 및 제 2 통신망과 다른 제 3 통신망으로 수신하는 것을 특징으로 하는 멀티 모드 단말기
2. 제 1항에 있어서,
   상기 제 1 통신망은 CDMA, GSM, WCDMA, WIBRO, LTE, 또는 LTE 어드밴스 중 어느 하나에 대응되는 망이며, 상기 제 2 통신망은 상기 제 1 통신망과 다른 망에 대응되는 것을 특징으로 멀티 모드 단말기.
3. 삭제
4. 서로 다른 통신 서비스를 지원하는 멀티 모드 단말기에서 융합형 3차원(3D) 스트리밍 방송을 수신하는 방법에 있어서,
   제 1 콘텐츠를 수신하는 단계;
   제 2 콘텐츠를 수신하는 단계;
   상기 제 1 콘텐츠 및 상기 제 2 콘텐츠를 합성하여 3차원 합성 콘텐츠를 생성하는 단계;
   상기 3차원 합성 콘텐츠의 혼합된 화질의 화질열화를 보상하는 단계를 포함하고,
   상기 제1 콘텐츠 및 상기 제 2 콘텐츠 중 하나의 콘텐츠는 제 1 통신망으로 수신하고, 다른 하나의 콘텐츠는 제 2 통신망으로 수신하고,
   상기 화질열화를 보상하는 단계는 MVC 또는 SVC중 하나의 알고리즘을 적용하는 것을 특징으로 하는 3차원(3D) 스트리밍 방송을 수신하고,
   상기 MVC 또는 SVC 중 하나의 알고리즘의 인코딩을 통한 부가 정보를 상기 제 1 통신망 및 제 2 통신망과 다른 제 3 통신망으로 수신하는 것을 특징으로 하는 3차원(3D) 스트리밍 방송을 수신하는 방법.
5. 제 4항에 있어서,
   상기 제 1 통신망은 CDMA, GSM, WCDMA, WIBRO, LTE, 또는 LTE 어드밴스 중 어느 하나에 대응되는 망이며, 상기 제 2 통신망은 상기 제 1 통신망과 다른 망에 대응되는 것을 특징으로 3차원(3D) 스트리밍 방송을 수신하는 방법.
6. 삭제
7. 삭제
8. 삭제

Images