JP6095659B2 - 送信装置、受信装置およびその送受信方法 - Google Patents

送信装置、受信装置およびその送受信方法 Download PDF

Info

Publication number
JP6095659B2
JP6095659B2 JP2014521571A JP2014521571A JP6095659B2 JP 6095659 B2 JP6095659 B2 JP 6095659B2 JP 2014521571 A JP2014521571 A JP 2014521571A JP 2014521571 A JP2014521571 A JP 2014521571A JP 6095659 B2 JP6095659 B2 JP 6095659B2
Authority
JP
Japan
Prior art keywords
data
eye video
transmission
content
multimedia
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014521571A
Other languages
English (en)
Other versions
JP2014523721A (ja
Inventor
パク，ホン−ソク
キム，ヨン−ジェ
キム，ヒ−ジン
ジュ，ソン−シン
リ，デ−ジョン
リ，ジェ−ジュン
ジャン，ヨン−ソク
ジュ，ユ−ソン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of JP2014523721A publication Critical patent/JP2014523721A/ja
Application granted granted Critical
Publication of JP6095659B2 publication Critical patent/JP6095659B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/37—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability with arrangements for assigning different transmission priorities to video input data or to video coded data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L21/00—Processes or apparatus adapted for the manufacture or treatment of semiconductor or solid state devices or of parts thereof
    • H01L21/02—Manufacture or treatment of semiconductor devices or of parts thereof
    • H01L21/02104—Forming layers
    • H01L21/02365—Forming inorganic semiconducting materials on a substrate

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Description

本発明は、送信装置、受信装置およびその送受信方法に関し、より詳細には、複数のストリームを提供する送信装置、複数のストリームを受信して処理する受信装置およびその送受信方法に関する。
最近、電子技術の発達により、多様な電子装置が開発および普及されている。特に、テレビの場合、３Ｄコンテンツより高い解像度のコンテンツを提供することができるようになり、それにより、放送技術においても、３Ｄコンテンツ、マルチアングルコンテンツ、デプス（Ｄｅｐｔｈ）映像を含むコンテンツ等のように、複数の映像を含むコンテンツやＵＨＤ級の画質のコンテンツを提供するための技術が開発されている。
既存の放送網で使用されるチャネル帯域幅は制限的である一方で、マルチアングルコンテンツ、３Ｄコンテンツ、ＵＨＤ級の画質のコンテンツ等は、従来のコンテンツより大きいデータサイズを有するため、既存の放送網からデータサイズの大きいコンテンツをそのまま伝送することに無理があった。
一方、新たなコンテンツを提供するために、新たな設備に投資することは費用の面でも無理があり、既存の放送設備および受信装置を用いて新たなコンテンツを提供するための方策が求められる。
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、互いに異なる経路を通じて、複数のストリームを提供する送信装置、複数のストリームを受信して処理する受信装置およびその送受信方法を提供することにある。
本発明の一実施形態に係る送信装置は、マルチメディアデータをダウンスケーリングするダウンスケーラと、前記ダウンスケーリングされたマルチメディアデータをエンコードする第１エンコーダと、前記エンコードされたマルチメディアデータを第１伝送網を通じて伝送する第１伝送部と、前記エンコードされたマルチメディアデータをデコードするデコーダと、前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、前記アップスケーリングされたマルチメディアデータを用いて、復元データを生成する復元データ生成部と、前記復元データをエンコードする第２エンコーダと、前記エンコードされた復元データを第２伝送網を通じて伝送する第２伝送部とを含む。
ここで、前記マルチメディアデータは、２Ｄコンテンツデータであり、前記復元データ生成部は、前記２Ｄコンテンツデータおよび前記アップスケーリングされた２Ｄコンテンツデータを比較し、その比較結果を前記復元データとして生成してよい。
または、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方であり、前記復元データ生成部は、前記左眼映像データおよび前記右眼映像データのうちの他方と、前記アップスケーリングされたマルチメディアデータとを比較し、その比較結果を前記復元データとして生成してよい。
そして、前記第１伝送網はＲＦ網であり、前記第２伝送網はＩＰ（インターネット）網であってよい。
一方、本発明の一実施形態に係る受信装置は、第１伝送網を通じて伝送されるマルチメディアデータを受信する第１受信部と、前記受信されたマルチメディアデータをデコードする第１デコーダと、前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、第２伝送網を通じて伝送される復元データを受信する第２受信部と、前記復元データをデコードする第２デコーダと、前記アップスケーリングされたマルチメディアデータに前記復元データを適用し、コンテンツを復元するデータ復元部とを含む。
ここで、前記マルチメディアデータは、２Ｄコンテンツデータであり、前記復元データは、前記２Ｄコンテンツデータに対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記２Ｄコンテンツデータから減算して抽出したデータであり、前記データ復元部は、前記アップスケーリングされた２Ｄコンテンツデータに前記復元データを加算して原本２Ｄコンテンツデータを復元してよい。
または、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方であり、前記復元データは、前記３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記左眼映像データおよび右眼映像データのうちの他方から減算して抽出したデータであり、前記データ復元部は、前記アップスケーリングされた３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に前記復元データを加算し、前記左眼映像データおよび右眼映像データのうちの他方を復元してよい。
そして、前記第１伝送網はＲＦ網であり、前記第２伝送網はＩＰ（インターネット）網であってよい。
一方、本発明の一実施形態に係る送信方法は、マルチメディアデータをダウンスケーリングするステップと、前記ダウンスケーリングされたマルチメディアデータをエンコードするステップと、前記エンコードされたマルチメディアデータを第１伝送網を通じて伝送するステップと、前記エンコードされたマルチメディアデータをデコードするステップと、前記デコードされたマルチメディアデータをアップスケーリングするステップと、前記アップスケーリングされたマルチメディアデータを用いて、復元データを生成するステップと、前記復元データをエンコードするステップと、前記エンコードされた復元データを第２伝送網を通じて伝送するステップとを含む。
ここで、前記マルチメディアデータは、２Ｄコンテンツデータであり、前記復元データを生成するステップは、前記２Ｄコンテンツデータおよび前記アップスケーリングされた２Ｄコンテンツデータを比較し、その比較結果を前記復元データとして生成してよい。
または、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方であり、前記復元データを生成するステップは、前記左眼映像データおよび前記右眼映像データのうちの他方と、前記アップスケーリングされたマルチメディアデータとを比較し、その比較結果を前記復元データとして生成してよい。
一方、本発明の一実施形態に係る受信方法は、第１伝送網を通じて伝送されるマルチメディアデータを受信するステップと、前記受信されたマルチメディアデータをデコードするステップと、前記デコードされたマルチメディアデータをアップスケーリングするステップと、第２伝送網を通じて伝送される復元データを受信するステップと、前記復元データをデコードするステップと、前記アップスケーリングされたマルチメディアデータに前記復元データを適用し、コンテンツを復元するステップとを含む。
ここで、前記マルチメディアデータは、２Ｄコンテンツデータであり、前記復元データは、前記２Ｄコンテンツデータに対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記２Ｄコンテンツデータから減算して抽出したデータであり、前記コンテンツを復元するステップは、前記アップスケーリングされた２Ｄコンテンツデータに前記復元データを加算して前記２Ｄコンテンツデータを復元してよい。
または、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方であり、前記復元データは、前記３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記左眼映像データおよび右眼映像データのうちの他方から減算して抽出したデータであり、前記コンテンツを復元するステップは、前記アップスケーリングされた３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に前記復元データを加算し、前記左眼映像データおよび右眼映像データのうちの他方を復元してよい。
一方、本発明の一実施形態に係るコンテンツ処理装置は、マルチメディアデータをダウンスケーリングするダウンスケーラと、前記ダウンスケーリングされたマルチメディアデータをエンコードする第１エンコーダと、前記エンコードされたマルチメディアデータをデコードするデコーダと、前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、前記アップスケーリングされたマルチメディアデータを用いて、復元データを生成する復元データ生成部と、前記復元データをエンコードする第２エンコーダとを含む。
以上説明したように、本発明によれば、既存の設備を用いて互いに異なる経路を通じて他のデータを送受信して伝送帯域幅制限を克服し、ユーザに新たなコンテンツを提供することができる。
なお、第２伝送網を通じてデータを受信することができない場合や、第２伝送網の受信環境が劣悪な場合にも、ユーザに新たなコンテンツを提供することができる。
本発明の一実施形態に係るマルチメディアデータ送受信システムを示す図である。 本発明の一実施形態に係るマルチメディアデータ送受信システムの構成を示すブロック図である。 本発明の一実施形態に係る送信装置の構成を示すブロック図である。 本発明の一実施形態に係る受信装置の構成を示すブロック図である。 本発明の別の実施形態に係る送信装置の構成を示すブロック図である。 本発明の別の実施形態に係る受信装置の構成を示すブロック図である。 本発明の更に別の実施形態に係る送信装置の構成を示すブロック図である。 第１伝送網および第２伝送網を通じて伝送されるデータを説明するための図である。 本発明の更に別の実施形態に係る受信装置の構成を示すブロック図である。 本発明の別の実施形態に係るマルチメディアデータ送受信システムを示す図である。 本発明の一実施形態に係る送信方法を説明するためのフローチャートである。 本発明の一実施形態に係る受信方法を説明するためのフローチャートである。
以下に添付図面を参照しながら、本発明の好適な実施形態について詳細に説明する。
図１は、本発明の一実施形態に係るマルチメディアデータ送受信システムを示す図である。図１に示すように、マルチメディアデータ送受信システムは、送信装置１００および受信装置２００を含む。
送信装置１００は、マルチメディアデータを処理し、互いに異なる信号を互いに異なる伝送網を通じて伝送する。例えば、図１のように、送信装置１００は、第１伝送網を通じて第１信号を伝送し、第２伝送網を通じて第２信号を伝送することができる。
第１信号および第２信号は、一つのマルチメディアデータを構成する互いに異なるマルチメディアデータまたはマルチメディアデータおよびマルチメディアデータを復元するための復元データであってよい。例えば、マルチメディアデータが３Ｄコンテンツである場合には、左眼映像または右眼映像が第１伝送網を通じて伝送され、他の映像を復元するための復元データが第２伝送網を通じて伝送されてよい。
ここで、第１伝送網はＲＦ網であってよく、第２伝送網はＩＰ（インターネット）網であってよい。ただ、それは一実施形態に過ぎず、第１伝送網がＩＰ網であり、第２伝送網がＲＦ網か、第１伝送網と第２伝送網とが同一の形態の網であってよい。
受信装置２００は、送信装置１００から伝送される第１信号および第２信号をそれぞれ受信し、データ処理を行ってマルチメディアデータを再生することができる。
図２は、本発明の一実施形態に係るマルチメディアデータ送受信システムの構成を示すブロック図である。図２によると、マルチメディアデータ送受信システムの送信装置１００は、データ処理部１１０と、第１伝送部１２０および第２伝送部１３０を含む。
データ処理部１１０は、マルチメディアデータを信号処理し、信号処理されたマルチメディアデータおよび復元データを第１伝送部１２０および第２伝送部１３０に伝送する。第１伝送部１２０は、信号処理されたマルチメディアデータを第１伝送網を通じて受信装置２００に伝送する。そのために、第１伝送部１２０は、信号処理されたマルチメディアデータを第１伝送網の伝送規格に適した形態に変換することができる。
第２伝送部１３０は、信号処理されたマルチメディアデータまたは復元データを第２伝送網を通じて受信装置２００に伝送する。そのために、第２伝送部１３０は、信号処理されたマルチメディアデータまたは復元データを第２伝送網の伝送規格に適した形態に変換することができる。
ここで、マルチメディアコンテンツが３Ｄコンテンツである場合、左眼映像または右眼映像が第１伝送網を通じて伝送され、他の映像を復元するための復元データが第２伝送網を通じて伝送されてよい。なお、左眼映像または右眼映像が第１伝送網を通じて伝送され、他の映像が第２伝送網を通じて伝送されてよい。マルチメディアデータが２Ｄコンテンツである場合には、ダウンスケーリングされた２Ｄコンテンツが第１伝送網を通じて伝送され、原本２Ｄコンテンツを復元するための復元データが第２伝送網を通じて伝送されてよい。
そして、第２伝送網を通じて伝送されるデータの一部が第１伝送網を通じて伝送されてよい。例えば、３Ｄコンテンツの左眼映像および右眼映像がそれぞれ第１伝送網および第２伝送網を通じて伝送される場合、第２伝送網に伝送される右眼映像の一部映像フレームを第１伝送網を通じて同時に伝送することができる。それにより、第２伝送網に伝送されるデータに遅延、損失等が発生するとしても、第１伝送網を通じて伝送されたデータを用いて３Ｄコンテンツを再生できるようにすることができる。
一方、マルチメディアデータ送受信システムの受信装置２００は、第１受信部２１０と、第２受信部２２０およびデータ処理部２３０を含む。
第１受信部２１０は、送信装置１００から第１伝送網を通じてマルチメディアデータを受信する。第２受信部２２０は、送信装置１００から第２伝送網を通じてマルチメディアデータまたは復元データを受信する。データ処理部２３０は、原本コンテンツを出力部（図示せず）を介して出力することができるように、第１受信部２１０および第２受信部２２０を介して受信されたマルチメディアデータまたは復元データを信号処理する。
以下においては、実施形態別に送信装置１００および受信装置２００の動作をより具体的に説明する。
＜２Ｄコンテンツおよび復元データを伝送する実施形態＞
図３および図４を参照し、２Ｄコンテンツおよび復元データを送受信する実施形態について説明する。ここで、２Ｄコンテンツは、ＵＨＤ画質の２Ｄ映像、マルチアングル映像等であってよい。
図３は、本発明の一実施形態に係る送信装置の構成を示すブロック図である。図３を参照すると、送信装置１００は、ダウンスケーラ１１１と、第１エンコーダ１１２と、デコーダ１１３と、アップスケーラ１１４と、復元データ生成部１１５と、第２エンコーダ１１６と、第１伝送部１２０および第２伝送部１３０を含む。
ダウンスケーラ１１１は、原本２Ｄコンテンツデータが入力されると、入力されたデータをダウンスケーリングする。ＵＨＤ画質のような大容量のコンテンツデータは、原本データを一つの伝送チャネルを通じて伝送することができない場合があり、このような場合、ダウンスケーリングを通じてデータサイズを減らすことができる。
第１エンコーダ１１２は、ダウンスケーリングされた２Ｄコンテンツデータをエンコードする。具体的に、第１エンコーダ１１２は、ダウンスケーリングされた２Ｄコンテンツデータに対して、既存の受信装置との互換性のために、ＭＰＥＧ−２エンコードを行うことができる。ただ、第１エンコーダ１１２でエンコードすることができる映像フォーマットはそれに限定されず、Ｈ.２６４、ＨＥＶＣ等、現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットに応じてエンコードを行うことができる。
第１伝送部１２０は、第１エンコーダによってエンコードされた２Ｄコンテンツデータを受信装置２００に伝送する。第１伝送部１２０は、エンコードされた２Ｄコンテンツデータを伝送網に適するように更なる処理を行い、受信装置２００に伝送することができる。例えば、第１伝送網がＲＦ網である場合、第１伝送部１２０は変調器（図示せず）およびアップコンバータ（図示せず）等を含むことができ、ＲＦ信号を伝送するために、変調、アップコンバート等を行うことができる。
デコーダ１１３は、第１エンコーダによってエンコードされた２Ｄコンテンツデータをデコードする。具体的に、デコーダ１１３は、第１エンコーダ１１２の逆過程を行い、２Ｄコンテンツデータをデコードすることができる。
アップスケーラ１１４は、デコードされた２Ｄコンテンツデータに対してアップスケーリングを行う。それにより、アップスケーラ１１４は元の２Ｄコンテンツデータサイズに戻すことができる。
復元データ生成部１１５は、原本２Ｄコンテンツデータおよびアップスケーラ１１４によってアップスケーリングされた２Ｄコンテンツデータを入力され、原本データを生成する。原本２Ｄコンテンツデータは第１伝送網を通じて伝送するために、ダウンスケーラ１１１および第１エンコーダ１１２でダウンスケーリングおよびエンコード過程を経て、デコードおよびアップスケーリングを行いデータを復元するとしても誤差が発生するおそれがある。復元データ生成部１１５は、原本２Ｄコンテンツデータおよびアップスケーラ１１４でアップスケーリングされて入力された２Ｄコンテンツデータを比較し、その比較結果を復元データとして生成することができる。すなわち、復元データは、原本２Ｄコンテンツデータに対してダウンスケーリング、エンコード、デコードおよびアップスケーリング過程を行って発生する誤差データであってよい。
復元データ生成部１１５は、復元データを生成するために、減算器を含むことができる。すなわち、原本２Ｄコンテンツデータにアップスケーラ１１４で入力された２Ｄコンテンツデータを減算して復元データを生成することができる。
第２エンコーダ１１６は、復元データ生成部１１５から生成された復元データをエンコードする。具体的に、第２エンコーダは、復元データをＨＥＶＣエンコードを行うことができる。ただ、第２エンコーダ１１６でエンコードすることができる映像フォーマットはそれに限定されず、ＭＰＥＧ−２、Ｈ.２６４等、現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットに応じてエンコードを行うことができる。
第２伝送部１３０は、第２エンコーダ１１６によってエンコードされた復元データを受信装置２００に伝送する。例えば、第２伝送網がＩＰ網である場合、第１伝送部１２０はインターネットネットワークを通じてエンコードされた復元データを受信装置２００に伝送することができる。
図４は、本発明の一実施形態に係る受信装置の構成を示すブロック図である。図４によると、受信装置２００は、第１受信部２１０と、第２受信部２２０と、第１デコーダ２３１と、アップスケーラ２３２と、第２デコーダ２３３およびデータ復元部２３４を含む。
第１受信部２１０は、第１伝送網を通じて２Ｄコンテンツデータを受信する。第１伝送網がＲＦ網である場合、第１受信部２１０は、アンテナ、チューナ部、復調部、等化部等を含む形態で実現されてよい。アンテナ、チューナ部、復調部、等化部等の構造および動作については、公知の様々の放送規格に記載されているため、具体的な説明は省略する。
第１デコーダ２３１は、第１受信部２１０で受信された２Ｄコンテンツデータでデコードする。具体的に、第１デコーダ２３１は圧縮映像フォーマットによって送信装置１００の第１エンコーダ１１２の逆過程を行い、２Ｄコンテンツデータをデコードすることができる。例えば、２ＤコンテンツデータがＭＰＥＧ−２エンコードされた場合、ＭＰＥＧ−２デコードを行うことができる。
アップスケーラ２３２は、デコードされた２Ｄコンテンツデータをアップスケーリングする。アップスケーラ２３２は送信装置１００でガウンスケーリングされた２Ｄコンテンツデータを元のデータサイズに戻すことができる。
第２受信部２２０は、第２伝送網を通じて復元データを受信する。第２伝送網がＩＰ網である場合、第２受信部は復元データをＩＰストリーム形態で受信することができる。
第２デコーダ２３３は、第２受信部で受信された復元データをデコードする。具体的に、第２デコーダ２３３は圧縮映像フォーマットによって送信装置１００の第２エンコーダ１１６の逆過程を行い、復元データをデコードすることができる。例えば、２ＤコンテンツデータがＨＥＶＣエンコードされた場合、ＨＥＶＣデコードを行うことができる。
データ復元部２３４は、原本２Ｄコンテンツデータを復元する。具体的に、データ復元部２３４は、アップスケーラ２３２によってアップスケーリングされた２Ｄコンテンツデータに第２デコーダ２３３によってデコードされた復元データを適用し、送信装置１００および受信装置２００のデータ処理過程で発生する誤差を修正し、原本２Ｄコンテンツデータを復元する。そのために、データ復元部２３４は、加算器を含むことができる。すなわち、データ復元部２３４は、アップスケーリングされた２Ｄコンテンツデータに復元データを加算して原本２Ｄコンテンツデータを復元することができる。
一方、更なる実施形態として、第１エンコーダ１１２がＭＰＥＧ−２コーデックのように、Ｉｎ−ｌｏｏｐ ｄｅ−ｂｌｏｃｋｉｎｇ ｆｉｌｔｅｒが適用されていないコーデックを使用する場合、送信装置１００および受信装置２００は、アップスケーリングされたデータにＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇのためのデブロッキングフィルタ（Ｄｅ−ｂｌｏｃｋｉｎｇ Ｆｉｌｔｅｒ）（図示せず）を更に含むことができる。すなわち、送信装置１００のアップスケーラ１１４から出力されるデータは、デブロッキングフィルタ（図示せず）でＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇされた後、復元データ生成部１１５に入力され、受信装置２００のアップスケーラ２３２から出力されるデータは、デブロッキングフィルタ（図示せず）でＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇされた後、データ復元部２３４に入力されてよい。それにより、ＭＰＥＧ−２のブロックノイズによる誤差を減らすことができ、復元データのデータサイズを減らすことができる。
なお、マルチメディアデータがダウンスケーリングがなくても、既存の伝送チャネルの帯域幅のみで伝送が可能なデータサイズを有する場合には、送信装置１００および受信装置２００でダウンスケーラ１１１およびアップスケーラ１１４、２３２の構成を省略することができる。
＜３Ｄコンテンツの左眼映像および右眼映像のうちの一方および復元データを伝送する実施形態＞
図３および図４を参照し、３Ｄコンテンツおよび復元データを送受信する実施形態について説明する。３Ｄコンテンツおよび復元データを送受信する実施形態は、２Ｄコンテンツおよび復元データを送受信する実施形態とその構成が同一だが、送受信するデータのみで相違しているため、繰り返し説明は省略する。
図３は、本発明の一実施形態に係る送信装置の構成を示すブロック図である。図３を参照すると、送信装置１００は、ダウンスケーラ１１１と、第１エンコーダ１１２と、デコーダ１１３と、アップスケーラ１１４と、復元データ生成部１１５と、第２エンコーダ１１６と、第１伝送部１２０および第２伝送部１３０を含む。
ダウンスケーラ１１１は、３Ｄコンテンツデータを構成する左眼映像および右眼映像データのうちの一つが入力されると、入力されたデータをダウンスケーリングする。
第１エンコーダ１１２は、ダウンスケーリングされた左眼映像または右眼映像データをエンコードする。具体的に、第１エンコーダ１１２は、ダウンスケーリングされた２Ｄコンテンツデータに対して、既存の受信装置との互換性のために、ＭＰＥＧ−２エンコードを行うことができる。
第１伝送部１２０は、第１エンコーダによってエンコードされた左眼映像または右眼映像データを受信装置２００に伝送する。
デコーダ１１３は、第１エンコーダによってエンコードされた左眼映像または右眼映像データをデコードする。
アップスケーラ１１４は、デコードされた左眼映像または右眼映像データに対してアップスケーリングを行い、元のデータサイズに戻すことができる。
復元データ生成部１１５は、アップスケーラ１１４によってアップスケーリングされた左眼映像または右眼映像データおよび３Ｄコンテンツデータを構成する左眼映像または右眼映像のうちの他方を受信して復元データを生成する。
具体的に、復元データ生成部１１５は、アップスケーリングされた左眼映像または右眼映像データおよび３Ｄコンテンツデータを構成する左眼映像および右眼映像のうちの他方のデータを比較し、比較結果を復元データとして生成することができる。そのために、復元データ生成部１１５は、減算器を含むことができる。すなわち、３Ｄコンテンツデータを構成する原本左眼映像および右眼映像データのうちの一方にアップスケーラ１１４から入力された左眼映像および右眼映像のうちの他方を減算して復元データを生成することができる。
一方、上述の実施形態において、復元データ生成部１１５は、復元データを生成するために、アップスケーリングされた左眼映像または右眼映像を利用するものとして説明したが、復元データ生成部１１５は、原本左眼映像および右眼映像を用いて、復元データを生成することもできる。この場合、データ処理部１１０のデコーダ１１３およびアップスケーラ１１４は省略することができる。
第２エンコーダ１１６は、復元データ生成部１１５から生成された復元データをエンコードする。
第２伝送部１３０は、第２エンコーダ１１６によってエンコードされた復元データを受信装置２００に伝送する。
図４は、本発明の一実施形態に係る受信装置の構成を示すブロック図である。図４によると、受信装置２００は、第１受信部２１０と、第２受信部２２０と、第１デコーダ２３１と、アップスケーラ２３２と、第２デコーダ２３３およびデータ復元部２３４を含む。
第１受信部２１０は、第１伝送網を通じて３Ｄコンテンツを構成する左眼映像および右眼映像データのうちの一方を受信する。
第１デコーダ２３１は、第１受信部２１０から受信されたデータをデコードする。具体的に、第１デコーダ２３１は圧縮映像フォーマットによって送信装置１００の第１エンコーダ１１２の逆過程を行い、左眼映像または右眼映像データをデコードすることができる。
アップスケーラ２３２は、デコードされた左眼映像または右眼映像データをアップスケーリングし、送信装置１００でダウンスケーリングされた左眼映像または右眼映像データを元のデータサイズに戻すことができる。
第２受信部２２０は、第２伝送網を通じて復元データを受信する。第２伝送網がＩＰ網である場合、第２受信部は復元データをＩＰストリーム形態で受信することができる。
第２デコーダ２３３は、第２受信部で受信された復元データをデコードする。具体的に、第２デコーダ２３３は圧縮映像フォーマットによって送信装置１００の第２エンコーダ１１６の逆過程を行い、復元データをデコードすることができる。
データ復元部２３４は、３Ｄコンテンツの左眼映像および右眼映像データのうちの一方のデータを復元する。具体的に、データ復元部２３４は、アップスケーラ２３２によってアップスケーリングされた左眼映像および右眼映像データに第２デコーダ２３３によってデコードされた復元データを適用し、左眼映像および右眼映像データのうちの他方を復元することができる。そのために、データ復元部２３４は、加算器を含むことができる。すなわち、データ復元部２３４は、アップスケーリングされた左眼映像または右眼映像データに復元データを加算し、左眼映像および右眼映像のうちの他方を復元することができる。
ここで、アップスケーラ２３２およびデータ復元部２３４から出力される３Ｄコンテンツの左眼映像および右眼映像は出力部（図示せず）を介して出力されてよい。
一方、更なる実施形態として、第１エンコーダ１１２がＭＰＥＧ−２コーデックのように、Ｉｎ−ｌｏｏｐ ｄｅ−ｂｌｏｃｋｉｎｇ ｆｉｌｔｅｒが適用されていないコーデックを使用する場合、送信装置１００および受信装置２００は、アップスケーリングされたデータにＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇのためのデブロッキングフィルタ（Ｄｅ−ｂｌｏｃｋｉｎｇ Ｆｉｌｔｅｒ）（図示せず）を更に含むことができる。すなわち、送信装置１００のアップスケーラ１１４から出力されるデータは、デブロッキングフィルタ（図示せず）でＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇされた後、復元データ生成部１１５に入力され、受信装置２００のアップスケーラ２３２から出力されるデータは、デブロッキングフィルタ（図示せず）でＢｌｏｃｋ Ａｒｔｉｆａｃｔ Ｆｉｌｔｅｒｉｎｇされた後、データ復元部２３４に入力されてよい。それにより、ＭＰＥＧ−２のブロックノイズによる誤差を減らすことができ、復元データのデータサイズを減らすことができる。
なお、マルチメディアデータがダウンスケーリングがなくても、既存の伝送チャネルの帯域幅のみで伝送が可能なデータサイズを有する場合には、送信装置１００および受信装置２００でダウンスケーラ１１１およびアップスケーラ１１４、２３２の構成を省略することができる。
＜３Ｄコンテンツの左眼映像および右眼映像データを伝送する実施形態＞
図５および図６を参照し、３Ｄコンテンツの左眼映像および右眼映像データを送受信する実施形態について具体的に説明する。
図５は、本発明の別の実施形態に係る送信装置の構成を示すブロック図である。図５によると、送信装置１００は、ダウンスケーラ１１１と、第１エンコーダ１１２と、第２エンコーダ１１６と、第１伝送部１２０および第２伝送部１３０を含む。
ダウンスケーラ１１１は、３Ｄコンテンツの左眼映像および右眼映像データのうちの一方が入力されると、入力されたデータをダウンスケーリングする。ＵＨＤ画質のような大容量のコンテンツデータは、原本データを一つの伝送チャネルを通じて伝送することができない場合があり、このような場合、ダウンスケーリングを通じてデータサイズを減らすことができる。
第１エンコーダ１１２は、ダウンスケーリングされた左眼映像または右眼映像データをエンコードする。具体的に、第１エンコーダ１１２は、ダウンスケーリングされた２Ｄコンテンツデータに対して、既存の受信装置との互換性のために、ＭＰＥＧ−２エンコードを行うことができる。ただ、第１エンコーダ１１２でエンコードすることができる映像フォーマットはそれに限定されず、Ｈ.２６４、ＨＥＶＣ等、現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットに応じてエンコードを行うことができる。
第１伝送部１２０は、第１エンコーダによってエンコードされた左眼映像または右眼映像データを受信装置２００に伝送する。第１伝送部１２０は、エンコードされた左眼映像または右眼映像データを伝送網に適するように更なる処理を行い、受信装置２００に伝送することができる。例えば、第１伝送網がＲＦ網である場合、第１伝送部１２０は変調器（図示せず）およびアップコンバータ（図示せず）等を含むことができ、ＲＦ信号を伝送するために、変調、アップコンバート等を行うことができる。
第２エンコーダ１１６は、３Ｄコンテンツの左眼映像および右眼映像データのうちの他方を受信してエンコードする。具体的に、第２エンコーダは、３Ｄコンテンツの左眼映像および右眼映像データのうちの他方をＨＥＶＣエンコードを行うことができる。ただ、第２エンコーダ１１６でエンコードすることができる映像フォーマットはそれに限定されず、ＭＰＥＧ−２、Ｈ.２６４等、現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットに応じてエンコードを行うことができる。
第２伝送部１３０は、第２エンコーダ１１６によってエンコードされた３Ｄコンテンツの左眼映像および右眼映像データのうちの他方を受信装置２００に伝送する。例えば、第２伝送網がＩＰ網である場合、第２伝送部１３０はインターネットネットワークを通じてエンコードされたデータを受信装置２００に伝送することができる。
図６は、本発明の別の実施形態に係る送信装置の構成を示すブロック図である。図６の受信装置は、図４の受信装置とデータ復元部２３４有無のみで異なるため、重複する説明は省略する。図６によると、受信装置２００は、第１受信部２１０と、第２受信部２２０と、第１デコーダ２３１と、アップスケーラ２３２および第２デコーダ２３３を含む。
第１受信部２１０は、第１伝送網を通じて３Ｄコンテンツを構成する左眼映像および右眼映像データのうちの一方を受信する。
第１デコーダ２３１は、第１受信部２１０で受信されたデータをデコードする。具体的に、第１デコーダ２３１は圧縮映像フォーマットによって送信装置１００の第１エンコーダ１１２の逆過程を行い、左眼映像または右眼映像データをデコードすることができる。
アップスケーラ２３２は、デコードされた２Ｄコンテンツデータをアップスケーリングし、送信装置１００でダウンスケーリングされた左眼映像または右眼映像データを元のデータサイズに戻すことができる。
第２受信部２２０は、第２伝送網を通じて３Ｄコンテンツの左眼映像および右眼映像データのうちの他方を受信する。第２伝送網がＩＰ網である場合、第２受信部は左眼映像および右眼映像データのうちの他方をＩＰストリーム形態で受信することができる。
第２デコーダ２３３は、第２受信部で受信された左眼映像および右眼映像データのうちの他方をデコードする。具体的に、第２デコーダ２３３は、圧縮映像フォーマットによって送信装置１００の第２エンコーダ１１６の逆過程を行い、デコードすることができる。
ここで、アップスケーラ２３２および第２デコーダ２３３から出力される３Ｄコンテンツの左眼映像および右眼映像データは出力部（図示せず）を介して出力されてよい。
一方、マルチメディアデータがダウンスケーリングがなくても、既存の伝送チャネルの帯域幅のみで伝送が可能なデータサイズを有する場合には、送信装置１００および受信装置２００でダウンスケーラ１１１およびアップスケーラ２３２の構成を省略することができる。
＜第１伝送網で第１データおよび第２データを伝送し、第２伝送網で第２データを伝送する実施形態＞
図７ないし図９を参照し、第１伝送網で一つのコンテンツを構成する第１データおよび第２データを同時に伝送し、第２伝送網で第２データを伝送する実施形態について具体的に説明する。ここで、第１データおよび第２データは、３Ｄコンテンツの左眼映像および右眼映像、マルチアングルコンテンツを構成する複数の映像、２Ｄデータおよびデプス映像データ等であってよい。
図７は、本発明の更に別の実施形態に係る送信装置の構成を示すブロック図である。図７によると、送信装置１００は、第１エンコーダ１１２と、第２エンコーダ１１６と、マルチプレクサ１１７と、第１伝送部１２０および第２伝送部１３０を含む。
第１エンコーダ１１２は、一つのコンテンツを構成する複数のマルチメディアデータのうちの第１データをエンコードする。第１エンコーダ１１２は、第１データに対して既存の受信装置との互換性のために、ＭＰＥＧ−２エンコードを行うことができる。ただ、第１エンコーダ１１２でエンコードできる映像フォーマットは、それに限定されず、Ｈ.２６４、ＨＥＶＣ等現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットによってエンコードを行うことができる。
第２エンコーダ１１６は、一つのコンテンツを構成する複数のマルチメディアデータのうちの第２データをエンコードする。具体的に、第２エンコーダ１１６は、第２データに対してＨＥＶＣエンコードを行うことができる。ただ、第２エンコーダ１１６でエンコードできる映像フォーマットはそれに限定されず、スケーラブル属性を有するＨ.２６４等現在利用可能な映像フォーマットおよび今後開発されて本発明に適用できる多様な映像フォーマットによってエンコードを行うことができる。
マルチプレクサ１１７は、第１エンコーダ１１２でエンコードされた第１データおよび第２エンコーダ１１６でエンコードされた第２データをマルチプレキシングして一つのデータを構成する。
第１伝送部１２０は、マルチプレクサ１１７によってマルチプレキシングされたデータを受信装置２００に伝送する。第１伝送部１２０は、マルチプレキシングされたデータを伝送網に適するように更なる処理を行い、受信装置２００に伝送することができる。例えば、第１伝送網がＲＦ網である場合、第１伝送部１２０は変調器（図示せず）およびアップコンバータ（図示せず）等を含むことができ、ＲＦ信号を伝送するために、変調アップコンバート等を行うことができる。
第２伝送部１３０は、第２エンコーダ１１６によってエンコードされた第２データを受信装置２００に伝送する。例えば、第２伝送網がＩＰ網である場合、第２伝送部１３０はインターネットネットワークを通じてエンコードされたデータを受信装置２００に伝送することができる。
それにより、既存の受信装置が第２伝送網を通じたデータ受信がサポートされていない場合、または、第２伝送網を通じたデータ受信が円滑ではない場合でも、受信装置は、第１伝送網を通じて伝送される第１データおよび第２データを受信し、複数のデータを含むコンテンツをユーザに提供することができる。
図８は、第１伝送網および第２伝送網を通じて伝送されるデータを説明するための図である。
第１伝送網がＲＦ網であり、第２伝送網がＩＰ網である場合を例えると、既存のＲＦ放送チャネルは１９.８３Ｍｂｐｓの伝送速度でデータを伝送することができる。例えば、第１データがＭＰＥＧ−２フォーマットで、第２データがＨ.２６４フォーマットで圧縮された場合、Ｈ.２６４はＭＰＥＧ−２フォーマットに比べて、２倍の圧縮効率を有し、それにより、マルチプレキシングされたデータは約１２Ｍｂｐｓの速度で第１データを伝送し、約６Ｍｂｐｓの速度で第２データを伝送することができる。第２データがＨ.２６４フォーマットでエンコードされた場合、６Ｍｂｐｓの速度で第２伝送網を通じて伝送されてよい。
図９は、本発明の更に別の実施形態に係る受信装置の構成を示すブロック図である。図９によると、受信装置２００は、第１受信部２１０と、第２受信部２２０と、デマルチプレクサ２３５と、第１デコーダ２３１および第２デコーダ２３３を含む。
第１受信部２１０は、第１伝送網を通じて第１データおよび第２データがマルチプレキシングされたデータを受信する。
第２受信部２２０と、第２伝送網を通じて第２データを受信する。第２伝送網がＩＰ網である場合、第２データをＩＰストリーム形態で受信することができる。
デマルチプレクサ２３５は、第１受信部２１０で受信されたデータをデマルチプレキシングして第１データおよび第２データに分離し、第１データを第１デコーダ２３１に、第２データを第２デコーダ２３３に出力する。
第１デコーダ２３１は、デマルチプレクサ２３５から入力される第１データをデコードする。具体的に、第１デコーダ２３１は圧縮映像フォーマットによって送信装置１００の第１エンコーダ１１２の逆過程を行い、第１データをデコードすることができる。
第２デコーダ２３３は、デマルチプレクサ２３５から入力される第２データをデコードする。具体的に、第２デコーダ２３３は圧縮映像フォーマットによって送信装置１００の第２エンコーダ１１６の逆過程を行い、デコードすることができる。
一方、上述のような実施形態においては、第１伝送網を通じて伝送される第２データと第２伝送網を通じて伝送される第２データを同一のデータとして説明を進める。しかし、第１伝送網を通じて伝送することができるデータサイズは限定的であり（例えば、第１伝送網がＲＦ網である場合、最大で１９.３８Ｍｂｐｓの伝送速度で伝送することができる）、第１伝送網を通じて伝送される第２データの量が多くなるほど、第１伝送網を通じて伝送できる第１データの量が少なくなる。
それにより、第１伝送網を通じて伝送される第２データは、第２伝送網を通じて伝送される第２データに比べて相対的に少ない量のデータを伝送することができる。例えば、第１伝送網は、第１データを約１６Ｍｂｐｓの伝送速度で、第２データを第２Ｍｂｐｓの伝送速度で伝送することができる。
そのために、第２エンコーダ１１６は、第２データを受信して第１伝送網に伝送するための相対的に低画質のデータ（以下、データベースという）および第２伝送網で伝送するための相対的に高画質のデータ（以下、エンハンスメントデータ）を生成してエンコードした後、マルチプレクサ１１７および第２伝送部１３０にそれぞれ出力することができる。
または、第２エンコーダ１１６は、ベースデータと更なる情報を含むデータを生成してエンコードして出力することができ、マルチプレクサ１１７は第１データとベースデータのみを選択的にマルチプレキシングし、第２伝送部１３０はベースデータおよび更なる情報を含むデータを同時に伝送する方法も可能である。
一方、第１伝送網を通じて伝送される第２データの量を減らすための方法として、第２データを構成する複数の映像フレームの一部の映像フレームのみを伝送する方法（例えば、３０ｆｐｓのフレームレートを有するコンテンツを１５ｆｐｓのフレームレートで伝送）、映像フレームの解像度を軽減する方法（例えば、ＨＤ画質をＳＤ画質に、またはＳＤ画質をＣＩＦ画質に変換）、映像フレームのビットレートを減少させる方法（例えば、２Ｍｂｐｓを５１２ｋｂｐｓに変換）等がある。
上述の実施形態に係る受信装置２００は、データ処理部２３０によって信号処理されたマルチメディアデータを出力する出力部（図示せず）を更に含むことができる。出力部（図示せず）は、映像データを出力する映像出力部（図示せず）およびオーディオデータを出力するオーディオ出力部（図示せず）を含むことができる。上述の実施形態において、データ処理部２３０の映像処理部に着目して説明したが、データ処理部２３０は受信されたマルチメディアデータに含まれたオーディオデータおよび付加データを処理するオーディオ処理部（図示せず）および付加データ処理部（図示せず）を含むことができる。オーディオ処理部（図示せず）は、オーディオデータを処理してオーディオ出力部を介して出力することができ、付加データ処理部（図示せず）は、字幕等のような付加データを処理して、映像データとレンダリングして画面を構成した後、構成された画面をディスプレイ部を介して出力することができる。
図１０は、本発明の別の実施形態に係るマルチメディアデータ送受信システムを示す図である。送受信システム２０は、図１および図２の送受信システム１０と動作を同じだが、図１および図２の送受信システム１０の送信装置１００が複数の装置を含む送信システムで実現されることで相違している。図１０によると、送受信システム２０は、コンテンツ処理装置３００と、第１送信装置４００と、第２送信装置５００および受信装置２００を含む。
コンテンツ処理装置３００は、送信装置１００のデータ処理部１１０に、第１送信装置４００は送信装置１００の第１伝送部１２０に、第２送信装置５００は送信装置１００の第２伝送部１３０に対応する構成であり、具体的な説明は省略する。
図１１は、本発明の一実施形態に係る送信方法を説明するためのフローチャートである。図１１によると、マルチメディアデータをダウンスケーリングする（Ｓ１１１０）。ここで、マルチメディアデータは２Ｄコンテンツデータ、３Ｄコンテンツの左眼映像および右眼映像データのうちの一つであってよい。そして、ダウンスケーリングされたマルチメディアデータをエンコードする（Ｓ１１２０）。具体的に、ダウンスケーリングされたマルチメディアデータに対して既存の受信装置との互換性のために、ＭＰＥＧ−２エンコードを行うことができる。その後、エンコードされたマルチメディアデータを第１伝送網を通じて伝送する（Ｓ１１３０）。ここで、第１伝送網はＲＦ網であってよい。
なお、エンコードされたマルチメディアデータをデコードした後（Ｓ１１４０）、デコードされたマルチメディアデータをアップスケーリングする（Ｓ１１５０）。そして、アップスケーリングされたマルチメディアデータを用いて復元データを生成する（Ｓ１１６０）。ここで、マルチメディアデータが２Ｄコンテンツデータである場合、２Ｄコンテンツデータおよびアップスケーリングされた２Ｄコンテンツデータと比較し、その比較結果を復元データとして生成することができる。マルチメディアデータが３Ｄコンテンツに含まれた左眼映像および右眼映像データのうちの一方である場合には、左眼映像データおよび右眼映像データのうちの他方のアップスケーリングされたマルチメディアデータを比較し、その比較結果を復元データとして生成することができる。
そして、復元データをエンコードした後（Ｓ１１７０）、第２伝送網を通じて伝送する（Ｓ１１８０）。第２伝送網はＩＰ（インターネット）網であってよい。
図１２は、本発明の一実施形態に係る受信方法を説明するためのフローチャートである。図１２によると、第１伝送網を通してマルチメディアデータを受信する（Ｓ１２１０）。第１伝送網はＲＦ網であってよい。そして、受信されたマルチメディアデータをデコードする（Ｓ１２２０）。ここで、マルチメディアデータは２Ｄコンテンツデータ、３Ｄコンテンツの左眼映像および右眼映像のうちの一方であってよい。その後、デコードされたマルチメディアデータをアップスケーリングする（Ｓ１２３０）。
そして、第２伝送網を通じて復元データを受信する（Ｓ１２５０）。第２伝送網はＩＰ網であってよい。ここで、復元データは２Ｄコンテンツデータに対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを２Ｄコンテンツデータから減算して抽出したデータであってよい。または、復元データは３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記左眼映像データおよび右眼映像データのうちの他方から減算して抽出したデータであってよい。
その後、受信された復元データをデコードし（Ｓ１２５０）、アップスケーリングされたマルチメディアデータに復元データを適用してコンテンツを復元する（Ｓ１２６０）。ここで、マルチメディアデータが２Ｄコンテンツデータの場合、アップスケーリングされた２Ｄコンテンツデータに復元データを加算して２Ｄコンテンツデータを復元することができる。マルチメディアデータが３Ｄコンテンツに含まれた左眼映像および右眼映像データのうちの一方である場合、アップスケーリングされた３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に復元データを加算し、左眼映像データおよび右眼映像データのうちの他方を復元することができる。
上述の本発明の多様な実施形態に係る方法を行うためのプログラムは多様な記録媒体に保存されて使用されてよい。
具体的には、上述の方法を実行するためのコードは、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、レジスタ、ハードディスク、リムーバブルディスク、メモリカード、ＵＳＢメモリ、ＣＤ−ＲＯＭなどのように、端末機で読取可能な多様な記録媒体に保存されていてよい。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明は以上の実施形態に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的趣旨の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

Claims (7)

  1. マルチメディアデータをダウンスケーリングするダウンスケーラであって、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方である、ダウンスケーラと、
    前記ダウンスケーリングされたマルチメディアデータをエンコードする第１エンコーダと、
    前記エンコードされたマルチメディアデータを第１伝送網を通じて伝送する第１伝送部と、
    前記エンコードされたマルチメディアデータをデコードするデコーダと、
    前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、
    前記左眼映像データおよび前記右眼映像データのうちの他方と、前記アップスケーリングされたマルチメディアデータとを比較し、その比較結果を復元データとして生成する復元データ生成部と、
    前記復元データをエンコードする第２エンコーダと、
    前記エンコードされた復元データを第２伝送網を通じて伝送する第２伝送部と
    を含む送信装置。
  2. 前記第１伝送網は、ＲＦ網であり、
    前記第２伝送網は、ＩＰ（インターネット）網であることを特徴とする請求項１に記載の送信装置。
  3. 第１伝送網を通じて伝送されるマルチメディアデータを受信する第１受信部であって、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方である、第１受信部と、
    前記受信されたマルチメディアデータをデコードする第１デコーダと、
    前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、
    第２伝送網を通じて伝送される復元データを受信する第２受信部であって、前記復元データは、前記３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記左眼映像データおよび右眼映像データのうちの他方から減算して抽出したデータである、第２受信部と、
    前記復元データをデコードする第２デコーダと、
    前記アップスケーリングされた３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に前記復元データを加算し、前記左眼映像データおよび右眼映像データのうちの他方を復元するデータ復元部と
    を含む受信装置。
  4. 前記第１伝送網は、ＲＦ網であり、
    前記第２伝送網は、ＩＰ（インターネット）網であることを特徴とする請求項３に記載の受信装置。
  5. 送信装置の送信方法において、
    マルチメディアデータをダウンスケーリングするステップであって、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方である、ステップと、
    前記ダウンスケーリングされたマルチメディアデータをエンコードするステップと、
    前記エンコードされたマルチメディアデータを第１伝送網を通じて伝送するステップと、
    前記エンコードされたマルチメディアデータをデコードするステップと、
    前記デコードされたマルチメディアデータをアップスケーリングするステップと、
    前記左眼映像データおよび前記右眼映像データのうちの他方と、前記アップスケーリングされたマルチメディアデータとを比較し、その比較結果を復元データとして生成するステップと、
    前記復元データをエンコードするステップと、
    前記エンコードされた復元データを第２伝送網を通じて伝送するステップと
    を含む送信方法。
  6. 受信装置の受信方法において、
    第１伝送網を通じて伝送されるマルチメディアデータを受信するステップであって、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方である、ステップと、
    前記受信されたマルチメディアデータをデコードするステップと、
    前記デコードされたマルチメディアデータをアップスケーリングするステップと、
    第２伝送網を通じて伝送される復元データを受信するステップであって、前記復元データは、前記３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に対してダウンスケーリング、エンコード、デコード、アップスケーリングを順次に行った後、結果データを前記左眼映像データおよび右眼映像データのうちの他方から減算して抽出したデータである、ステップと、
    前記復元データをデコードするステップと、
    前記アップスケーリングされた３Ｄコンテンツの左眼映像データおよび右眼映像データのうちの一方に前記復元データを加算し、前記左眼映像データおよび右眼映像データのうちの他方を復元するステップと
    を含む受信方法。
  7. マルチメディアデータをダウンスケーリングするダウンスケーラであって、前記マルチメディアデータは、３Ｄコンテンツに含まれた左眼映像データおよび右眼映像データのうちの一方である、ダウンスケーラと、
    前記ダウンスケーリングされたマルチメディアデータをエンコードする第１エンコーダと、
    前記エンコードされたマルチメディアデータをデコードするデコーダと、
    前記デコードされたマルチメディアデータをアップスケーリングするアップスケーラと、
    前記左眼映像データおよび前記右眼映像データのうちの他方と、前記アップスケーリングされたマルチメディアデータとを比較し、その比較結果を復元データとして生成する復元データ生成部と、
    前記復元データをエンコードする第２エンコーダと
    を含むコンテンツ処理装置。
JP2014521571A 2011-07-22 2012-07-23 送信装置、受信装置およびその送受信方法 Expired - Fee Related JP6095659B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201161510658P 2011-07-22 2011-07-22
US61/510,658 2011-07-22
US201161513044P 2011-07-29 2011-07-29
US61/513,044 2011-07-29
KR1020120079562A KR20130011994A (ko) 2011-07-22 2012-07-20 송신 장치, 수신 장치 및 그 송수신 방법
KR10-2012-0079562 2012-07-20
PCT/KR2012/005859 WO2013015585A1 (ko) 2011-07-22 2012-07-23 송신 장치, 수신 장치 및 그 송수신 방법

Publications (2)

Publication Number Publication Date
JP2014523721A JP2014523721A (ja) 2014-09-11
JP6095659B2 true JP6095659B2 (ja) 2017-03-15

Family

ID=47840796

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014521571A Expired - Fee Related JP6095659B2 (ja) 2011-07-22 2012-07-23 送信装置、受信装置およびその送受信方法

Country Status (8)

Country Link
US (1) US20140226710A1 (ja)
EP (1) EP2736251A4 (ja)
JP (1) JP6095659B2 (ja)
KR (1) KR20130011994A (ja)
CN (1) CN103703765B (ja)
BR (1) BR112014001549A2 (ja)
MX (1) MX2014000852A (ja)
WO (1) WO2013015585A1 (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102139532B1 (ko) * 2013-09-30 2020-07-30 엘지전자 주식회사 비디오 스트림 송/수신 장치 및 비디오 스트림 송/수신 방법
KR101699337B1 (ko) 2014-08-20 2017-01-24 전자부품연구원 Shvc 기반의 uhd 영상데이터 송수신 시스템
KR102189647B1 (ko) 2014-09-02 2020-12-11 삼성전자주식회사 디스플레이 장치, 시스템 및 그 제어 방법
CN108141639B (zh) * 2015-10-06 2021-07-27 索尼互动娱乐股份有限公司 通信系统、发送装置、接收装置和通信系统控制方法
ES2883245T3 (es) * 2015-10-27 2021-12-07 Lg Chemical Ltd Composición plastificante, composición de resina y procedimientos de preparación de la misma
CN108702478B (zh) * 2016-02-22 2021-07-16 索尼公司 文件生成装置、文件生成方法、再现装置和再现方法
KR102520957B1 (ko) * 2016-04-15 2023-04-12 삼성전자주식회사 인코딩 장치, 디코딩 장치 및 이의 제어 방법
GB2574575A (en) * 2018-04-27 2019-12-18 V Nova Int Ltd Video decoder chipset

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5148272A (en) * 1991-02-27 1992-09-15 Rca Thomson Licensing Corporation Apparatus for recombining prioritized video data
JPH07226022A (ja) * 1994-02-15 1995-08-22 Sony Corp ディジタル記録再生装置
EP1802135A3 (en) * 1995-03-15 2008-11-12 Kabushiki Kaisha Toshiba Moving picture coding and/or decoding systems
JP2000308089A (ja) * 1999-04-16 2000-11-02 Nippon Hoso Kyokai <Nhk> 立体画像符号化装置および復号化装置
JP2002010251A (ja) * 2000-06-19 2002-01-11 Matsushita Electric Ind Co Ltd 映像信号符号化装置および映像信号復号化装置
CN1509081A (zh) * 2002-12-20 2004-06-30 �ʼҷ����ֵ��ӹɷ����޹�˾ 通过广播和网络流传送双层hdtv信号的方法和系统
ATE435567T1 (de) * 2003-08-29 2009-07-15 Koninkl Philips Electronics Nv System und verfahren zur codierung und decodierung von daten der verbesserungsebene durch verwendung deskriptiver modellparameter
KR100658222B1 (ko) * 2004-08-09 2006-12-15 한국전자통신연구원 3차원 디지털 멀티미디어 방송 시스템
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
JP2007174634A (ja) * 2005-11-28 2007-07-05 Victor Co Of Japan Ltd 階層符号化装置、階層復号化装置、階層符号化方法、階層復号方法、階層符号化プログラム及び階層復号プログラム
US20070133899A1 (en) * 2005-12-09 2007-06-14 Rai Barinder S Triggering an image processing function
JP4565392B2 (ja) * 2005-12-22 2010-10-20 日本ビクター株式会社 映像信号階層復号化装置、映像信号階層復号化方法、及び映像信号階層復号化プログラム
US7864219B2 (en) * 2006-06-15 2011-01-04 Victor Company Of Japan, Ltd. Video-signal layered coding and decoding methods, apparatuses, and programs with spatial-resolution enhancement
US8250618B2 (en) * 2006-09-18 2012-08-21 Elemental Technologies, Inc. Real-time network adaptive digital video encoding/decoding
KR100800653B1 (ko) * 2006-12-01 2008-02-01 삼성전자주식회사 3차원 입체 영상을 압축하기 위한 장치 및 방법
US8243798B2 (en) * 2006-12-20 2012-08-14 Intel Corporation Methods and apparatus for scalable video bitstreams
US8804845B2 (en) * 2007-07-31 2014-08-12 Cisco Technology, Inc. Non-enhancing media redundancy coding for mitigating transmission impairments
KR20090030126A (ko) * 2007-09-19 2009-03-24 주식회사 엘앤피아너스 스케일러블 비디오 트랜스코딩 및 멀티채널 송신장치 및 그방법
MY162861A (en) * 2007-09-24 2017-07-31 Koninl Philips Electronics Nv Method and system for encoding a video data signal, encoded video data signal, method and system for decoding a video data signal
KR101385884B1 (ko) * 2008-01-30 2014-04-16 고려대학교 산학협력단 다시점 동영상의 부호화 및 복호화 방법 및 장치
KR101500440B1 (ko) * 2008-10-17 2015-03-09 삼성전자 주식회사 영상처리장치 및 영상처리방법
KR101537709B1 (ko) * 2008-12-30 2015-07-20 엘지전자 주식회사 이차원 영상과 3ｄ 영상의 통합 서비스가 가능한 디지털 방송 수신방법, 및 이를 이용한 디지털 방송 수신장치
KR101683119B1 (ko) * 2009-06-16 2016-12-06 엘지전자 주식회사 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
KR20110020694A (ko) * 2009-08-24 2011-03-03 삼성전자주식회사 네트워크를 통한 기능 공유 방법 및 장치
US9076267B2 (en) * 2011-07-19 2015-07-07 Panasonic Intellectual Property Corporation Of America Image coding device, integrated circuit thereof, and image coding method

Also Published As

Publication number Publication date
CN103703765A (zh) 2014-04-02
MX2014000852A (es) 2014-04-30
EP2736251A4 (en) 2015-03-11
KR20130011994A (ko) 2013-01-30
US20140226710A1 (en) 2014-08-14
EP2736251A1 (en) 2014-05-28
BR112014001549A2 (pt) 2017-06-13
WO2013015585A1 (ko) 2013-01-31
JP2014523721A (ja) 2014-09-11
CN103703765B (zh) 2017-05-17

Similar Documents

Publication Publication Date Title
JP6095659B2 (ja) 送信装置、受信装置およびその送受信方法
KR101353115B1 (ko) 비디오 컨텐트를 인코딩하는 방법
JP2022028657A (ja) 画像符号化装置、画像符号化方法、及びプログラム
US20070160126A1 (en) System and method for improved scalability support in mpeg-2 systems
JP2010512096A (ja) 非リアルタイムベースのデジタル実感放送送受信システム及びその方法
US20140211861A1 (en) Method and system for providing high definition (hd) broadcasting service and ultra high definition (uhd) broadcasting service
CN101816179A (zh) 用于编码视频数据信号的方法与系统、编码的视频数据信号、用于解码视频数据信号的方法与系统
KR102361314B1 (ko) 360도 가상현실 방송 서비스 제공 방법 및 장치
US9264782B2 (en) Method and system for providing realistic broadcasting image
EP2150058A1 (en) Encoding and decoding methods and apparatus, signal and computer program products therefor
US20140286415A1 (en) Video encoding/decoding method and apparatus for same
WO2011126586A1 (en) Video content distribution
US11089343B2 (en) Capability advertisement, configuration and control for video coding and decoding
WO2010022672A1 (zh) 码流转换系统及方法、码流识别单元和方案确定单元
TW201145977A (en) Method and system for synchronizing 3D glasses with 3D video displays
US20230319371A1 (en) Distribution of Multiple Signals of Video Content Independently over a Network
US8483271B2 (en) Method and system for 3D video pre-processing and post-processing
KR102517570B1 (ko) 3dtv 방송 송수신 장치
KR20170130883A (ko) 하이브리드 망 기반의 가상 현실 방송 서비스 방법 및 장치
Misu et al. Real-time video coding system for up to 4K 120P videos with spatio-temporal format conversion
KR101012760B1 (ko) 다시점 비디오의 송수신 시스템 및 방법
KR101336423B1 (ko) 계층적 부호화 장치 및 방법, 복호화 장치 및 방법
Kumar et al. A Comparative Analysis of Advance Three Dimensional Video Coding for Mobile Three Dimensional TV
Huo et al. Tree-structured multiple description coding for multiview mobile tv and camera-phone networks
KR20140095948A (ko) Hd 방송 서비스 및 uhd 방송 서비스를 제공하는 방법 및 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160519

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160906

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170214

R150 Certificate of patent or registration of utility model

Ref document number: 6095659

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees