JP6116906B2 - 部分化を利用した適応的なストリーミング方法及びその装置 - Google Patents
部分化を利用した適応的なストリーミング方法及びその装置 Download PDFInfo
- Publication number
- JP6116906B2 JP6116906B2 JP2012538764A JP2012538764A JP6116906B2 JP 6116906 B2 JP6116906 B2 JP 6116906B2 JP 2012538764 A JP2012538764 A JP 2012538764A JP 2012538764 A JP2012538764 A JP 2012538764A JP 6116906 B2 JP6116906 B2 JP 6116906B2
- Authority
- JP
- Japan
- Prior art keywords
- media data
- information
- data
- media
- client
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 66
- 230000003044 adaptive effect Effects 0.000 title description 24
- 230000005540 biological transmission Effects 0.000 claims description 75
- 230000004044 response Effects 0.000 claims description 19
- 238000001824 photoionisation detection Methods 0.000 claims description 3
- AWSBQWZZLBPUQH-UHFFFAOYSA-N mdat Chemical compound C1=C2CC(N)CCC2=CC2=C1OCO2 AWSBQWZZLBPUQH-UHFFFAOYSA-N 0.000 description 13
- 238000010586 diagram Methods 0.000 description 12
- 239000012634 fragment Substances 0.000 description 12
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 description 3
- 229920003208 poly(ethylene sulfide) Polymers 0.000 description 3
- 229920006393 polyether sulfone Polymers 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000001094 photothermal spectroscopy Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2416—Real-time traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/38—Flow control; Congestion control by adapting coding or compression rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
- H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
- H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/812—Monomedia components thereof involving advertisement data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
Description
【発明の名称】 部分化を利用した適応的なストリーミング方法及びその装置
【発明の詳細な説明】
【技術分野】
【0001】
本発明は、ストリーミング方法及びその装置に係り、さらに詳細には、ストリーミング環境の変動(fluctuation)によって、適応的にメディアデータをストリーミングする方法及びその装置に関する。
【背景技術】
【0002】
ネットワークを介してメディアデータを伝送する方式には、ダウンロード方式とストリーミング方式とがある。ストリーミング方式は、サーバがリアルタイムでメディアデータを伝送し、クライアントは、受信されたメディアデータをリアルタイムで再生する方式である。
【0003】
ストリーミング方式は、メディアデータをいずれも送受信した後、メディアデータの再生が始まるダウンロード方式と異なり、サーバとクライアントとの間に設定された論理的なチャネルを介して、リアルタイムでメディアデータが送受信され、再生されるために、ストリーミング環境の変動を反映し、メディアデータ再生のQoS(Quality of Sevice)を維持することができる方法及びその装置が必要である。
【先行技術文献】
【特許文献】
【0004】
【特許文献1】 欧州特許出願公開第1043892号明細書
【発明の概要】
【発明が解決しようとする課題】
【0005】
本発明が解決しようとする技術的課題は、ストリーミング、すなわち、メディアデータの伝送及び受信を、ストリーミング環境によって適応的に調節して行う方法及びその装置を提供するところにあり、前記方法を実行するためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供するところにある。
【課題を解決するための手段】
【0006】
前記技術的課題を解決するための本発明の一実施形態によるメディアデータを受信する方法は、所定のコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをサーバから受信する段階と、前記受信されたファイルに基づいて、前記複数のメディアデータのうち、少なくとも1つのメディアデータを受信する段階と、を含み、前記複数のメディアデータは、前記コンテンツを所定品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つのデータ部分をそれぞれ含み、前記少なくとも1つのデータ部分は、ランダム・アクセスポイント(random access point)として始まることを特徴とする。
【0007】
本発明の他の実施形態によれば、前記メディアデータは、MPEG−2 TS(MPEG−2 transport stream)フォーマットによるメディアデータであり、前記MPEG−2 TSのエレメンタリーストリーム(elementary stream)に対応することを特徴とする。
【0008】
本発明のさらに他の実施形態によれば、前記データ部分は、少なくとも1つのPES(packetized elementary stream)を含み、1つのPESは、1つのデータ部分にいずれも含まれることを特徴とする。
【0009】
本発明のさらに他の実施形態によれば、前記PESは、1つの映像フレームまたは音声フレームに係わるデータを含むことを特徴とする。
【0010】
本発明のさらに他の実施形態によれば、前記ランダム・アクセスポイントに係わる伝送ストリームは、ランダム・アクセスポイントに係わる伝送ストリームであることを示す情報を含むことを特徴とする。
【0011】
本発明のさらに他の実施形態によれば、前記受信されたファイルは、前記複数のメディアデータに係わるPAT(program association table)及びPMT(program map table)のうち、少なくとも一つを指示する情報をさらに含むことを特徴とする。
【0012】
本発明のさらに他の実施形態によれば、前記PAT及びPMTは、伝送ストリームで初期化部分(initialization segment)であり、前記複数のメディアデータと分離されていることを特徴とする。
【0013】
本発明のさらに他の実施形態によれば、前記PAT及びPMTのうち、少なくとも一つは、前記複数のメディアデータの全体リストを含むことを特徴とする。
【0014】
本発明のさらに他の実施形態によれば、前記複数のメディアデータは、PID(packetID)が異なることを特徴とする。
【0015】
本発明のさらに他の実施形態によれば、前記少なくとも1つのデータ部分は、少なくとも1つのGOP(group of pictures)に係わる伝送ストリームを含むことを特徴とする。
本発明のさらに他の実施形態によれば、前記メディアデータは、MP4フォーマットによるメディアデータであり、MP4の「trak」ボックスに対応することを特徴とする。
【0016】
前記技術的課題を解決するための本発明の一実施形態によるメディアデータを伝送する方法は、所定のコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをクライアントに伝送する段階と、前記伝送されたファイルに基づいた前記クライアントの要請によって、前記複数のメディアデータのうち、少なくとも1つのメディアデータを前記クライアントに伝送する段階と、を含み、前記複数のメディアデータは、前記コンテンツを所定品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つのデータ部分をそれぞれ含み、前記少なくとも1つのデータ部分は、ランダム・アクセスポイント(random access point)として始まることを特徴とする。
【0017】
前記技術的課題を解決するための本発明の一実施形態によるメディアデータを受信する装置は、所定のコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをサーバから受信する情報受信部と、前記受信されたファイルに基づいて、前記複数のメディアデータのうち、少なくとも1つのメディアデータを受信するメディアデータ受信部と、を含み、前記複数のメディアデータは、前記コンテンツを所定品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つのデータ部分をそれぞれ含み、前記少なくとも1つのデータ部分は、ランダム・アクセスポイント(random access point)として始まることを特徴とする。
【0018】
前記技術的課題を解決するための本発明の一実施形態によるメディアデータを受信する装置は、所定のコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをクライアントに伝送する情報伝送部と、前記伝送されたファイルに基づいた前記クライアントの要請によって、前記複数のメディアデータのうち、少なくとも1つのメディアデータを前記クライアントに伝送するメディアデータ伝送部と、を含み、前記複数のメディアデータは、前記コンテンツを所定品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分をそれぞれ含み、前記少なくとも1つの部分は、ランダム・アクセスポイント(random access point)として始まることを特徴とする。
【0019】
前記技術的課題を解決するために本発明による一実施形態は、前記メディアデータを受信する方法及び伝送する方法を実行するためのプログラムを記録したコンピュータで読み取り可能な記録媒体を提供する。
【発明の効果】
【0020】
本発明によれば、メディアデータを体系的な規則によって部分化することによって、さらにストリーミング環境に適応的なメディアデータの伝送及び受信を、さらに安定して、早く行うことができる。
【図面の簡単な説明】
【0021】
【図1】本発明の一実施形態によるストリーミングシステムを図示する図面である。
【図2A】本発明の一実施形態によるストリーミング方法を説明するためのフローチャートである。
【図2B】本発明の一実施形態によるストリーミング方法を説明するためのフローチャートである。
【図3】本発明の一実施形態によるコンテンツについての情報を含むファイルのスキーマ(schema)を図示する図面である。
【図4A】本発明の一実施形態による複数のメディアデータを定義するための情報を図示する図面である。
【図4B】本発明の一実施形態によるメディアデータのヘッダについての情報を図示する図面である。
【図4C】本発明の一実施形態による複数のメディアデータそれぞれに含まれた少なくとも1つのデータ部分についての情報を示す図面である。
【図5A】本発明の他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【図5B】本発明の他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【図6】本発明の他の実施形態によるコンテンツについての情報を含むファイルのスキーマを図示する図面である。
【図7】本発明の他の実施形態によるコンテンツについての情報を図示する図面である。
【図8A】本発明の一実施形態によるメディア表現記述のスキーマを図示する図面である。
【図8B】本発明の一実施形態によるメディア表現記述のスキーマを図示する図面である。
【図9A】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9B】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9C】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9D】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9E】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9F】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9G】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図9H】本発明の一実施形態によるメディア表現記述を図示する図面である。
【図10A】本発明の一実施形態による複数のメディアデータを図示する図面である。
【図10B】本発明の一実施形態による複数のメディアデータを図示する図面である。
【図10C】本発明の一実施形態による複数のメディアデータを図示する図面である。
【図11A】本発明のさらに他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【図11B】本発明のさらに他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【図12A】本発明の他の実施形態による複数のメディアデータを図示する図面である。
【図12B】本発明の他の実施形態による複数のメディアデータを図示する図面である。
【図12C】本発明の他の実施形態による複数のメディアデータを図示する図面である。
【図13】本発明の一実施形態によるサーバのメディアデータ伝送装置を図示する図面である。
【図14】本発明の一実施形態によるクライアントのメディアデータ受信装置を図示する図面である。
【図15A】本発明の一実施形態によるMPEG−2 TS(transport stream)フォーマットのメディアデータを部分化する方法を図示する図面である。
【図15B】本発明の一実施形態によるMPEG−2 TS(transport stream)フォーマットのメディアデータを部分化する方法を図示する図面である。
【図16A】本発明の一実施形態による開始時間についての情報をメディアデータの部分に挿入する方法を図示する図面である。
【図16B】本発明の一実施形態による開始時間についての情報をメディアデータの部分に挿入する方法を図示する図面である。
【図17】本発明の一実施形態による部分の構造を図示する図面である。
【図18A】本発明の一実施形態によるMP4フォーマットによるメディアデータを部分化する方法を図示する図面である。
【図18B】本発明の一実施形態によるMP4フォーマットによるメディアデータを部分化する方法を図示する図面である。
【図18C】本発明の一実施形態によるMP4フォーマットによるメディアデータを部分化する方法を図示する図面である。
【発明を実施するための形態】
【0022】
以下、図面を参照しつつ、本発明の実施形態について詳細に説明する。
【0023】
図1は、本発明の一実施形態によるストリーミングシステムを図示している。
【0024】
図1を参照すれば、本発明の一実施形態によるストリーミング・システム100は、エンコーディング装置110、サーバ120及びクライアント130を含む。
【0025】
エンコーディング装置110は、入力されたコンテンツを複数の異なる品質にエンコーディングし、1つのコンテンツに係わる複数のメディアデータを生成する。サーバ120がクライアント130にメディアデータをストリーミングするとき、ストリーミング環境は、変更されてもよい。例えば、ストリーミングのためのネットワーク140帯域幅が変更されもし、メディアデータを伝送するために、サーバ120が使用可能なハードウェア資源またはメディアデータを受信するために、クライアント130が使用可能なハードウェア資源が変更されもする。
【0026】
従って、エンコーディング装置110は、流動的なストリーミング環境による適応的なストリーミングのために、1つのコンテンツを複数の異なる品質にエンコーディングする。ビット率(bit rate)、サンプリング周波数(sampling frequency)、解像度またはフレーム率(frame rate)のような因子を調節することによって、1つのコンテンツを複数の異なる品質にエンコーディングすることができる。例えば、1つの動映像コンテンツを互いに異なる解像度でエンコーディングし、500Kbps、1000Kbps及び2000Kbpsの複数のメディアデータを生成することができる。
【0027】
異なる品質にエンコーディングされた複数のメディアデータは、サーバ120に伝送され、このとき、コンテンツについての情報及び複数のメディアデータそれぞれについての情報も、共にサーバ120に伝送される。コンテンツについての情報は、コンテンツのメタデータであり、コンテンツの題目(title)、シノプシス(synopsis)、コンテンツ識別子(content ID)、コンテンツURL(uniform resource locator)のような情報を含むことができる。複数のメディアデータについての情報は、それぞれのメディアデータの品質、類型及び識別子などを含むことができるが、これらについては、図4A、図4B及び図4Cを参照して詳細に説明する。
【0028】
クライアント130は、コンテンツについての情報及び複数のメディアデータについての情報のうち、少なくとも一つを受信し、これに基づいて、サーバ120に複数のメディアデータのうち、少なくとも1つのメディアデータを要請する。クライアント130は、ストリーミング環境を推定(estimation)し、推定されたストリーミング環境に基づいて、複数のメディアデータのうち、少なくとも1つのメディアデータを選択する。推定されたストリーミング環境で、最適のQoS(quality of service)を維持することができる少なくとも1つのメディアデータを選択することができる。その後、クライアント130は、選択された少なくとも1つのメディアデータの伝送を要請するHTTP要請(hypertext transfer protocol request)をサーバ120に伝送することができる。
【0029】
ストリーミング環境が劣化されて高品質のメディアデータを受信すれば、途切れなくメディアデータを再生することができない場合には、複数のメディアデータのうち、低品質のメディアデータを要請し、ストリーミング環境が改善されて高品質のメディアデータを受信しても、途切れなくメディアデータを再生することができる場合には、複数のメディアデータのうち、高品質のメディアデータを要請することができる。
【0030】
所定のメディアデータを受信していて、他のメディアデータを伝送することをサーバ120に要請することもできる。例えば、ストリーミング環境が劣化した状態で、低品質の第1メディアデータを要請して受信していたクライアント130は、ストリーミング環境が改善されることによって、さらに高品質の第2メディアデータを伝送することをサーバ120に要請することができる。従来技術によるストリーミング方法によれば、サーバ120とクライアント130とがストリーミングチャネルを最初に設定するとき、品質を一度設定すれば、続けて同じ品質でメディアデータを送受信せねばならなかった。しかし、本発明によれば、クライアント130が低品質の第1メディアデータを受信していても、同じコンテンツに係わるさらに高品質の第2メディアデータをさらに要請することができ、ストリーミング環境による適応的なストリーミングが可能になる。
【0031】
ネットワーク140の帯域幅、及びサーバ120またはクライアント130の使用可能なハードウェア資源に基づいて、ストリーミング環境を推定する多様な方法が、クライアント130がストリーミング環境を推定するのに利用される。例えば、クライアント130は、受信されるメディアデータのタイムスタンプ及びBER(bit error rate)に基づいて、ストリーミング環境を推定することができる。受信されるメディアデータのタイムスタンプを確認し、メディアデータが再生速度より遅い速度で受信されていれば、ストリーミング環境が劣化したと判断することができる。また、受信されるメディアデータのBERが高くなっても、ストリーミング環境が劣化していると判断することができる。
【0032】
クライアント130が、ストリーミング環境によって、複数のメディアデータのうち、少なくとも1つのメディアデータを伝送することを要請すれば、サーバ120は、要請されたメディアデータをクライアント130に伝送する。HTTP要請に対するHTTP応答として、要請されたメディアデータをクライアント130に伝送することができる。
【0033】
複数のメディアデータそれぞれは、コンテンツを異なる品質にエンコーディングし、分割して生成された複数の部分のうち、少なくとも一つを含んでもよい。言い換えれば、エンコーディング装置110のエンコーディング結果として生成された複数のメディアデータそれぞれは、時間に基づいて分割された少なくとも1つの部分をそれぞれ含んでもよい。サーバ120は、コンテンツを1つのストリームにエンコーディングし、続けて伝送するのではなく、複数の部分に分割してそれぞれ伝送する。コンテンツを、10秒または20秒のように所定の時間単位で分割し、複数の部分を生成することができる。分割の基礎になる時間は、GOP(group of picture)に基づいて設定される。一つまたは二つ以上のGOPのピクチャに対応するメディアデータを1つの部分に設定することができる。
【0034】
例えば、2種の品質にコンテンツがストリーミングされる場合、第1メディアデータは、コンテンツを第1品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分を含むことができ、第2メディアデータは、コンテンツを第2品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分を含んでもよい。
【0035】
複数のメディアデータを時間に基づいてそれぞれ分割することによって、前述の適応的なストリーミングが可能になる。例えば、ストリーミングが始まれば、サーバ120は、低品質の第1メディアデータの、0秒から20秒に該当する部分を伝送する。その後、20秒後に、ストリーミング環境が改善されたと判断され、クライアント130がさらに高品質のメディアデータを要請すれば、サーバ120は、さらに高品質の第2メディアデータの、20秒から40秒に該当する部分を伝送することができる。メディアデータが、時間に基づいて複数の部分に分割されているために、ストリーミング最中にも、ストリーミング環境によって、異なるメディアデータの部分を伝送することができる。
【0036】
図15A及び図15Bは、本発明の一実施形態によるMPEG−2 TS(transport stream)フォーマットのメディアデータを部分化する方法を図示している。本発明の詳細な説明では、メディアデータのコンテナ・フォーマットが、MP4フォーマットまたはMPEG−TSフォーマットであるとき、メディアデータを部分化する方法を例に挙げて説明する。しかし、コンテナ・フォーマットは、それに限定されるものではなく、メディアデータの伝送のためのあらゆるコンテナ・フォーマットに本発明が適用されることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。例えば、コンテナ・フォーマットは、MP4、MPEG−TSではないMMT(MPEG media transport)標準によるフォーマットであってもよい。
【0037】
図15Aを参照すれば、メディアデータがビデオデータである場合、エレメンタリー・ストリームは、複数のピクチャに係わるデータを含み、複数のピクチャに係わるデータは、GOPに基づいてグループ化される。それぞれのGOPは、イントラピクチャ(intra picture)、すなわち、予測符号化のために他のピクチャを参照しないピクチャでもって始まる。イントラピクチャは、予測符号化のために他のピクチャを参照しないために、ランダム・アクセスポイント(random access point)として利用することができる。GOPは、ビデオデータを複数の部分に区分する単位の例示であるのみ、GOPではない他の単位が図15Aのメディアデータを部分化する方法に利用することができることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。
【0038】
複数のピクチャに係わるデータは、MPEG2−TSフォーマットによって複数の伝送ストリーム(transport stream)に分割され、複数の伝送ストリームをグループ化し、1つの部分が生成される。伝送ストリームをグループ化して1つの部分を生成するために、部分の開始及び終了の境界は、最初の伝送ストリームに係わるパケット及び最後の伝送ストリームに係わるパケットの境界と一致する。言い換えれば、1つの部分は、伝送ストリーム単位から構成される。
【0039】
図15Aでは、1つの部分(segment)1530が、2つのGOP1510及び1512に係わる複数の伝送ストリーム(TS)1520を含み、GOP単位で1つの部分1530が生成されるために、それぞれの部分は、イントラピクチャ、すなわち、ランダム・アクセスポイントで始まる。
【0040】
本発明は、ストリーミング環境に適応的なストリーミングのために、メディアデータを少なくとも1つの部分に分割し、ストリーミング環境によって互いに異なる品質の部分を伝送する。従って、それぞれの部分は、独立して再生されねばならず、従って、それぞれの部分は、ランダム・アクセスポイントで始まることが望ましい。ところで、一般的にGOPは、イントラピクチャで始まり、イントラピクチャは、ランダム・アクセスポイントとして利用されるので、図15Aに図示されているように、少なくとも1つのGOP単位に係わる伝送ストリーム1520をグループ化し、1つの部分を生成する。
【0041】
また、1つのピクチャに係わるデータを分割し、MPEG2−TSフォーマットによる複数の伝送ストリームを生成するときに、1つの伝送ストリームは、1つのピクチャに係わるデータだけ含むようにする。複数のピクチャに係わるデータを、所定サイズに一定に分割し、伝送ストリームを生成すれば、1つの伝送ストリームに、2つのピクチャに係わるデータが含まれもする。言い換えれば、1つのピクチャに係わるデータの終了を考慮せずに、t−1時刻ピクチャに係わるデータ及びt時刻ピクチャに係わるデータを一定の大きさに分割し、伝送ストリームを生成すれば、t−1時刻ピクチャに係わるデータの最後の伝送ストリームは、t−1時刻ピクチャに係わるデータ及びt時刻ピクチャに係わるデータを含んでもよい。
【0042】
ところで、本発明による適応的なストリーミングは、部分1530はもとより、伝送ストリーム1520もそれぞれ独立して再生されることが望ましい。例えば、クライアント130が、現在ビデオデータのt−1時刻ピクチャを再生しているが、t時刻ピクチャからは、解像度が高いピクチャを再生する場合、t時刻ピクチャからは、他の品質のメディアデータを受信せねばならない。ところで、所定の伝送ストリームが、t−1時刻ピクチャに係わるデータ及びt時刻ピクチャに係わるデータをいずれも含むならば、メディアデータの境界が曖昧になり、図15Aのような適応的ストリーミングのための部分化の効果が半減する。従って、エレメンタリー・ストリームを分割して伝送ストリームを生成するときにも、1つの伝送ストリームのペイロードには、1つのビデオフレームに係わるデータだけ含まれるように、伝送ストリームを生成することができる。また、1つのビデオフレームに係わる最初の伝送ストリームのヘッダは、1つのビデオフレームが始まることを示す情報を含んでもよい。1つのビデオフレームが始まることを示す情報は、伝送ストリームパケットの「payload_start_unit_indicator」であってもよい。
【0043】
ただし、本発明の他の実施形態によれば、1つの伝送ストリームに、複数のピクチャに係わるデータが含まれていることもあり、このとき、適応的なストリーミングは、ピクチャ単位で行うことができる。言い換えれば、ストリーミング環境を考慮し、品質が異なるピクチャに変更してストリーミングを行うことができる。
【0044】
また、伝送ストリームが、前述のランダム・アクセスポイントに係わる伝送ストリームであるならば、ランダム・アクセスポイントに係わる伝送ストリームであることを示す情報が、伝送ストリームのヘッダに含まれてもよい。伝送ストリームのヘッダは、次のランダム・アクセスポイントに係わる伝送ストリームの位置についての情報も含むことによって、ランダムアクセスを速い速度で行うこともできる。
【0045】
図15Aに図示された部分化方法によって、複数のメディアデータは、図15Bに図示されているように部分化される。図15Bを参照すれば、複数のメディアデータは、複数の伝送ストリームを含む部分にそれぞれ分割される。
【0046】
複数のメディアデータは、それぞれ複数のエレメンタリー・ストリーム(例えば、MPEG−2によるエレメンタリー・ストリーム)にそれぞれ対応し、その場合、複数のメディアデータそれぞれについて、異なるPID(packet ID)1550,1560及び1570が割り当てられる。ただし、本発明のさらに他の実施形態によれば、1つのコンテンツ(例えば、プログラム)を、品質だけ異なって設定し、エンコーディングして生成された複数のメディアデータは、いずれも同じコンテンツに係わるメディアデータであるから、PIDが同一に設定されもする。図15Aのエレメンタリー・ストリームは、図15BのPIDが「1」であるメディアデータ、PIDが「2」であるメディアデータ、またはPIDが「3」であるメディアデータであってもよい。
【0047】
MPEG−2によれば、PSI(program specific information)も共にストリーミングされ、PSIを含む伝送ストリームのPIDは、特定値に固定される。しかし、本発明によれば、図15Bに図示されているように、PAT(program association table)及びPMT(program map table)のようなPSIは、複数のメディアデータに係わるヘッダであり、ペイロードデータと分離される。例えば、図15Bに図示されているように、PIDが「1」であるメディアデータのペイロードデータは、図15Aと関連して述べた方法によって部分化される。しかし、PAT及びPMTのようなPSIは、複数のメディアデータ全体に係わるヘッダであり、別途のファイルとして存在しうる。PAT及びPMTで、それぞれのメディアデータを区分するために割り当てられるPID1550,1560及び1570は、前述のように、複数のメディアデータそれぞれについて、異なって割り当てられ、品質だけ異なる複数のメディアデータについて同一に割り当てられもする。
【0048】
複数のメディアデータ全体に係わるヘッダ、すなわち、図15Bの「reference data」は、初期化部分(initialization segment)であり、メディアデータの再生を開始するために、ペイロードデータを含んでいる部分よりまずクライアント130に伝送される。言い換えれば、後述する図2Bの段階222、図5Bの段階532及び図11Bの段階1122で、クライアント130が受信するヘッダ情報が、図15Bの複数のメディアデータ全体に係わる、すなわち、「reference data」であってもよい。「reference data」は、図10C及び図12Cと関連して後述するヘッダファイル1050または1250に対応しうる。
【0049】
図15Bを参照すれば、複数のメディアデータが複数のエレメンタリー・ストリームにそれぞれ対応する場合、複数のメディアデータに含まれた部分それぞれは、少なくとも1つの連続したPES(packetized elementary stream)を含んでもよい。しかし、1つのPESは、1つの部分にのみ含まれることが望ましい。伝送ストリームと関連して説明したように、適応的ストリーミングのためには、1つの部分と、MPEG2−TSフォーマットによる伝送ストリーム単位とが整列されることが望ましい。従って、1つのPESも、1つの部分にのみ含まれるように、メディアデータを分割する。言い換えれば、1つのPESが異なる部分に含まれない。要するに、1つの部分は、整数個数のPESを含む。図15Bで、同じ時間のメディアデータに係わるPESは、PIDが「1」であるメディアデータに係わる部分、PIDが「2」であるメディアデータに係わる部分、及びPIDが「3」であるメディアデータに係わる部分にそれぞれ含まれる。PESは、複数の伝送ストリームを含む単位であり、1つの映像フレームまたは音声フレームに係わるデータを含むこともでき、複数の映像フレームまたは複数の音声フレームに係わるデータを含むこともできる。また、1つの映像フレームまたは音声フレームに係わるデータが、1つのPESに含まれない場合には、1つの映像フレームまたは音声フレームに係わるデータは、複数のPESに含まれてもよい。
【0050】
PESは、それぞれメディアデータの時間同期化のための情報、すなわち、タイムスタンプを含んでもよい。それぞれのPESが、どの時間のメディアデータについての情報を含んでいるか示す情報を含んでもよい。特に、時刻に基づいて伝送ストリームをグループ化して1つのPESを生成する場合、1つのPESに含まれるあらゆる伝送ストリームは、同じ時刻のメディアデータの伝送ストリームである。タイムスタンプは、PTS(presentation time stamp)及びDTS(decoding time stamp)のうち、少なくとも一つを含んでもよい。
【0051】
同じ種類の複数のメディアデータ(例えば、ビットレートが異なる複数のビデオデータ)または異なる種類の複数のメディアデータ(例えば、ビデオデータ並びにオーディオデータ)に含まれたPESに係わるタイムスタンプは、メディアデータの再生時間によって整列(aligned)されてもよい。
【0052】
例えば、第1メディアデータの最初のPESと、第2メディアデータの最初のPESとが同じ時間に再生されるコンテンツであるならば、PTS及び/またはDTSが同一に設定される。図15Bに図示されたPESを例に挙げて説明すれば、図15Bで、PIDが「1」であるメディアデータのPES 1552に係わるタイムスタンプ、PIDが「2」であるメディアデータのPES 1562に係わるタイムスタンプ、及びPIDが「3」であるメディアデータのPES 1572に係わるタイムスタンプは、同一に設定される。また、PIDが「1」であるメディアデータのPES 1554に係わるタイムスタンプ、PIDが「2」であるメディアデータのPES 1564に係わるタイムスタンプ、及びPIDが「3」であるメディアデータのPES 1574に係わるタイムスタンプも、同一に設定される。
【0053】
また、第1メディアデータを再生していて、メディアデータを変更し、第2メディアデータを再生する場合にも、連続的に再生することができるように、PTS及び/またはDTSが連続的に整列される。言い換えれば、第1メディアデータを再生していて、メディアデータを変更して第2メディアデータを再生すれば、第1メディアデータで、最後に再生されるPESのPTS及び/またはDTSと、第2メディアデータで、最初のに再生されるPESのPTS及び/またはDTSとが連続的に設定される。
【0054】
メディアデータの部分は、PES単位に基づいて生成され、それぞれのPESのPTS及び/またはDTSが、時間に基づいて連続的に整列されるために、それぞれの部分の開始時間は、PTS及び/またはDTSに基づいて知ることができる。従って、第1メディアデータを部分を再生し、続いて、第2メディアデータの次の部分を再生することができる。
【0055】
しかし、本発明の他の実施形態によれば、PESに対して、タイムスタンプが割り当てられない。PESに係わるタイムスタンプは、選択的要素であり、PESがタイムスタンプのような時間情報を含んでいない場合、メディアデータの部分の開始時間を特定することができない。図16A及び図16Bを参照して詳細に説明する。
【0056】
図16A及び図16Bは、本発明の一実施形態による開始時間についての情報を、メディアデータの部分に挿入する方法を図示している。図16A及び図16Bは、図15Bに図示されているように、メディアデータを複数の部分に分割するとき、メディアデータの部分に時間情報を挿入する方法を図示している。
【0057】
図16Aを参照すれば、PESが、PTS及び/またはDTSを含まなければ、k番目の部分1610に含まれているPES1620及び1630は、PTS及び/またはDTSを含まず、k番目の部分1610の開始時間を特定することができない。
【0058】
その場合、それぞれの部分の開始時間を特定することができないので、適応的なストリーミングが不可能になる。これは、前述のように、適応的なストリーミングのためには、異なるメディアデータの部分が連続的に再生されねばならないが、PESが、PTS及び/またはDTSを含まずに、それぞれの部分の開始時間を特定することができないので、異なるメディアデータの部分が連続的に再生されないためである。例えば、第1メディアデータのk番目の部分を再生し、連続して第2メディアデータのk+1番目の部分を再生しなければならない場合に、k+1番目の部分の開始時間を特定することができなければ、連続して再生することができない。
【0059】
従って、本発明の一実施形態は、伝送ストリームに部分に係わる時間情報を含めることができる。それぞれの部分の最初の伝送ストリームに、PTS及び/またはDTSを含めることができる。例えば、図16Aに図示されたk番目の部分1610の最初のPES 1620の最初の伝送ストリーム1622に時間情報を含めることができるが、次のような構文を介して時間情報を生成し、生成された時間情報を、伝送ストリームの1つのフィールドとして含めることができる。
【0060】
【表1】
【0061】
伝送ストリームの「private_data_bytes」フィールドに、それぞれの部分をインデクシング(indexing)することができる「Segment_Index()」を挿入するが、「data_field_tag」は、伝送ストリームのフィールドが、部分のインデクシングと関連した部分であることを定義する構文であり、「data_field_length」は、フィールド長を定義する。PTS、DTS及びPCR(program clock reference)のうち、少なくとも一つが時間情報として挿入される。
【0062】
「Segment_Index()は、前述のように、最初のPES 1620の最初の伝送ストリーム1622に含まれもし、最初のPESの他の伝送ストリーム1624ないし1626に含まれもすることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。
【0063】
前述のように、1つのPESは、1つの部分に含まれ、互いに異なる部分に同時に含まれないことが望ましい。しかし、図16Bに図示されているように、1つのPES 1640が、互いに異なる部分1610及び1612に含まれている場合にも、k+1番目の部分の最初の伝送ストリームにも、時間情報を挿入することによって、適応的なストリーミングを行うことができる。
【0064】
図16BのPES 1640が、前述の時間情報、例えば、PTS及び/またはDTSを含んでいない場合はもとより、含んでいる場合にも、異なる部分1610及び1612に同時に含まれていれば、k+1番目の部分に含まれた伝送ストリームについては、開始時間を特定することができないので、適応的なストリーミングを行うことができない。
【0065】
従って、k+1番目の部分の最初の伝送ストリーム1642に、前述の「Segment_Index()」を挿入することによって、k+1番目の部分に含まれた伝送ストリームの開始時間を特定する。
【0066】
「Segment_Index()」が、k+1番目の部分の最初の伝送ストリーム1642に含まれもし、他の伝送ストリーム1644ないし1646に含まれもすることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。
【0067】
また、図16A及び16Bは、MPEG−2 TSフォーマットによって、メディアデータを部分化するとき、時間情報を挿入する方法を図示した。しかし、図18Aないし図18Cと関連して後述するように、MP4フォーマットによって、メディアデータを部分化する場合にも、同じ方式で時間情報を挿入することができる。例えば、それぞれの部分に含まれたMP4ボックスに、前述の「Segment_Index()」を挿入することによって、それぞれの部分の開始時間を特定することができる。
【0068】
複数のメディアデータのPESのPTS及び/またはDTSが、再生時間に基づいて整列されず、連続的な再生が不可能な場合が発生しもする。例えば、所定コンテンツに係わる第1メディアデータを第1サーバが生成し、所定コンテンツに係わる第2メディアデータを第2サーバが生成する場合、PTS及び/またはDTSが再生時間に基づいて整列されない。
【0069】
例えば、第1メディアデータの連続した3つの部分のPTSが、それぞれ「1000」、「2000」、「3000」と定義されており、同じ再生時間に係わる第2メディアデータの連続した3つの部分のPTSが、それぞれ「11000」、「12000」、「13000」と定義されていることもある。その場合、第1メディアデータの最初の部分のPTSは、「1000」であり、第2メディアデータの2番目の部分のPTSは、「11000」であるから、メディアデータを受信する側では、同じ再生時間に係わる部分であると判断することができない。その場合、PTSの不一致によって、メディアデータの変更再生を介した適応的なストリーミングが不可能である。
【0070】
このような問題を解決するために、次のような構文を介して、タイムスタンプの不一致を校正するための情報を生成し、生成された情報を、前述のメディア表現記述またはメディアデータに挿入することができる。
【0071】
【表2】
【0072】
伝送ストリームの「private_data_bytes」フィールドに、タイムスタンプの調整のための「Segment_Start_Adjustment()」を挿入するが、「data_field_tag」は、伝送ストリームのフィールドが、タイムスタンプの調整のための部分であることを定義する構文であり、「data_field_length」は、フィールド長を定義する。PTS、DTS及びPCR(program clock reference)のうち少なくとも一つが、部分のタイムスタンプを調整するための情報として挿入される。「Segment_Start_Adjustment()」は、メディアデータの部分それぞれに挿入され、「Segment_Start_Adjustment()」に定義されたPTS、DTS及びPCTによって、それぞれの部分のタイムスタンプが設定される。
【0073】
「Segment_Start_Adjustment()」は、「Segment_Index()」と同様に、前述のように、最初のPES 1620の最初の伝送ストリーム1622に含まれもし、最初のPESの他の伝送ストリーム1624ないし1626に含まれもすることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。
【0074】
また、タイムスタンプの調整のための別途の伝送ストリームを、最初のPES 1620の前に別途に定義し、定義された伝送ストリームに、前述の「Segment_Start_Adjustment()」を含めることもできる。
【0075】
しかし、図18Aないし図18Cと関連して後述するように、MP4フォーマットによって、メディアデータを部分化する場合にも、同じ方式でタイムスタンプの調整のための情報を挿入することができる。例えば、それぞれの部分に含まれたMP4ボックスに、前述の「Segment_Start_Adjustment()」を挿入することによって、それぞれの部分の開始時間を特定することができる。また、それぞれの部分に、「Segment_Start_Adjustment()」を挿入せずに、メディア表現記述にタイムスタンプの調整のための情報を挿入することができる。
【0076】
前述のPTS及び/またはDTSは、ビデオデータのタイムスタンプを定義する。従って、ビデオデータに係わる複数のメディアデータのタイムスタンプは、前述のように、メディアデータの再生時間によって、整列(aligned)される。しかし、このような再生時間に基づいたタイムスタンプの整列は、オーディオデータについても同一に適用される。言い換えれば、オーディオデータに係わる複数のメディアデータのタイムスタンプも、図15B、図16A及び図16Bと関連して説明したように、再生時間に基づいて、適応的なストリーミングが可能なように再生時間によって整列される。
【0077】
図17は、本発明の一実施形態による部分の構造を図示している。図17は、図15Bに図示されているように、メディアデータを複数の部分に分割するとき、それぞれの部分の構造を図示している。k番目の部分を例に挙げて説明するが、図17に図示された部分の構造は、順序と関係なしに、メディアデータに含まれたあらゆる部分に適用可能である。前述のように、メディアデータの部分を独立して再生するために、それぞれの部分は、ランダム・アクセスポイント、例えば、Iフレームとして始まることが望ましい。図17は、Iフレームで部分が始まるとき、部分の構造を図示している。
【0078】
図17を参照すれば、メディアデータのk番目の部分1710は、少なくとも1つのPESを含み、最初のPES 1710は、ランダム・アクセスポイント、すなわち、Iフレームに係わるデータで始まる。PESは、ビットストリームをフレーム単位でアクセスするための単位であるアクセス単位(AU:access unit)によって区分される。図17に図示された例では、これにより、Iフレームのアクセス単位1722と、PフレームまたはBフレームのアクセス単位1724とに区分される。
【0079】
Iフレームアクセス単位(AU)1722は、メディアデータの部分を独立して再生するためのパラメータを含むが、SPS(sequence parameter set)1732、PPS(picture parameter set)1734、SEI(supplemental enhancement information)1736を含む。SEI 1736は、CPB(coded picture buffer)のために必要な要素である。また、Iフレームアクセス単位1722は、1つの部分に含まれたフレームの先頭フレームであり、IDR(instantaneous decoding refresh)フレームを含む。SPS及びPPSは、アクセス単位の最初のバイトに含まれて参照され、ビデオストリームの残りのアクセス単位は、SPS及びPPSが参照された後に提供される。
【0080】
PフレームまたはBフレームのアクセス単位1724は、SEI 1742及びPフレームまたはBフレーム1744を含む。SEI 1724は、Iフレームアクセス単位1722のSEI 1736と同じ目的でアクセス単位に挿入される。
【0081】
ストリーミング環境を考慮した連続的な再生のためには、同じ時間に係わる異なるメディアデータの部分は、開始時間(start time)と持続時間(duration)とで同一でなければならない。例えば、同じ時間に係わる異なるメディアデータの部分は、最初のアクセス単位と最後のアクセス単位とのPTSが同一でなければならない。
【0082】
図18Aないし図18Cは、本発明の一実施形態によるMP4フォーマットによるメディアデータを部分化する方法を図示している。
【0083】
図18Aを参照すれば、図15Aと同じ方法で、メディアデータを複数の部分に分割することができる。図15Aに図示されたように、メディアデータがビデオデータである場合、エレメンタリー・ストリームは、複数のピクチャに係わるデータを含み、GOPに基づいてグループ化される。それぞれのGOPは、インフラピクチャで始まる。図18Aの「Slice」は、図15Aの「Segment」に対応する。
【0084】
図18Aに図示された実施形態では、2つのGOP 1810及び図1820が1つの部分に含まれる。2つのGOP 1810及び図1820に含まれた複数のピクチャは、MP4フォーマットによって1つの部分に含まれる。従って、部分1830は、MP4フォーマットによって、メディアデータのヘッダ情報を含む「moov」ボックス、ペイロードデータを含む「moof」ボックス、及び他のヘッダ情報を含む「moof」ボックスを含む。GOP 1810及び図1820に基づいて1つの部分を生成するので、それぞれの部分は、イントラピクチャ、すなわち、ランダム・アクセスポイントで始まる。
【0085】
図18Aに図示された部分化方法によって、複数のメディアデータは、図18Bに図示されているように部分化される。図18Bを参照すれば、複数のメディアデータは、複数のサンプル(sample)を含む部分にそれぞれ分割される。
【0086】
複数のメディアデータは、それぞれMP4フォーマットによる複数の「trak」にそれぞれ対応し、その場合、複数のメディアデータそれぞれについて、異なる「trak」ID 1850,1860及び図1870が割り当てられる。
【0087】
本発明によれば、図18Bに図示されているように、複数のメディアデータに係わるヘッダが「moov」ボックスとしてペイロードデータと分離される。図15Bと関連して述べたPAT及びPMTを含む「reference data」と同様に、複数のメディアデータに係わるメタデータを含むヘッダがペイロードを含む「mdat」ボックス1880と分離され、「moov」ボックス1840として定義される。
【0088】
図18Bの「moov」ボックス1840は、初期化部分(initialization segment)であり、ペイロードデータを含んでいる「mdat」ボックス1880より、まずクライアント130に伝送される。後述する図2Bの段階222、図5Bの段階532及び図11Bの段階1122で、クライアント130が受信するヘッダ情報が、図18Bの「moov」ボックス1840であってもよい。
【0089】
ヘッダを除外した残りのペイロード・データは、「mdat」ボックス(1880)に含まれる。例えば、オーディオデータをグループ化し、少なくとも1つの部分に分割する場合には、「trak1」、「trak2」及び「trak3」に対応する複数のオーディオ・サンプルに係わるデータを1つの部分にグループ化する。「trak1」に対応するオーディオ・サンプルを所定の時間単位でグループ化して複数の部分を生成し、「trak2」に対応するオーディオ・サンプルを所定の時間単位でグループ化し、複数の部分を生成することができる。同様に、「trak3」に対応するオーディオ・サンプルを所定の時間単位でグループ化し、複数の部分を生成することができる。適応的なストリーミングのために、それぞれのサンプルに係わるデータは、ただ1つの部分にのみ含まれてもよい。「mdat」ボックス1880に含まれるサンプルに係わるヘッダは、「moov」ボックス(1840)に含まれた「trak」ボックス1850,1860及び図1870に含まれる。また、ビデオデータをMP4フォーマットによってグループ化する場合には、1つのGOPに係わるデータは、1つの部分にのみ含まれる。
【0090】
図18Cは、本発明の他の実施形態によるMP4フォーマットに基づいた複数のメディアデータの部分化を図示している。図18Bと比較すれば、図18Bは、複数のサンプルに係わるペイロード・データが、1つの「mdat」ボックス(1880)で、所定の時間単位に基づいてグループ化される実施形態を図示しているのに対し、図18Cは、複数のサンプルに係わるペイロード・データが、複数の「moof」ボックス及び「mdat」ボックスによって部分化されるところが異なる。例えば、複数のメディアデータのうち、「trak1」に対応するメディアデータが、図18Aに図示されたところによって部分化されるとき、最初の部分に係わる「moof」ボックス1851及び「mdat」ボックス1852が存在し、2番目の部分に係わる「moof」ボックス1853及び「mdat」ボックス1854が存在する。
【0091】
メタデータを含んでいる「moof」ボックス1851または1853、及びペイロード・データを含んでいる「mdat」ボックス1852または1854に基づいて、「trak1」に対応するメディアデータを分割することができる。
【0092】
「moof」ボックスは、サンプルに係わるメタデータを含んでいる「traf」ボックスを含み、図18Bと関連して説明したように、1つのサンプルに係わるデータは、異なる部分に含まれない。例えば、1つのサンプルに係わるデータは、最初の部分に係わる「mdat」ボックス(1852)、または2番目の部分に係わる「mdat」ボックス1854に含まれ、最初の部分に係わる「mdat」ボックス1852及び2番目の部分に係わる「mdat」ボックス1854のいずれにも含まれない。
【0093】
図2Aは、本発明の一実施形態によるストリーミング方法を説明するためのフローチャートである。
【0094】
図2Aを参照すれば、段階210でクライアント130は、所定のコンテンツについての情報を伝送することをサーバ120に要請する。クライアント130のユーザが、クライアント130の画面に表示されたユーザ・インターフェースで所定のコンテンツを選択すれば、選択されたコンテンツについての情報を伝送することをサーバ120に要請する。クライアント130は、コンテンツについての情報を伝送することを要請するHTTP要請をサーバ120に伝送することができる。
【0095】
クライアント130から要請を受信したサーバ120は、クライアント130にコンテンツについての情報を伝送する。HTTP要請に対するHTTP応答として、コンテンツについての情報をクライアント130に伝送することができる。コンテンツについての情報は、OIPF(open IPTV forum)標準によるCAD(content access descriptor)であってもよい。図3を参照しつつ詳細に説明する。
【0096】
図3は、本発明の一実施形態によるコンテンツ(contents)についての情報を含むファイルのスキーマ(schema)を図示している。コンテンツについての情報を含むファイルは、CADであって、XML(eXtensible Markup Language)ファイルであってもよい。以下、本発明の詳細な説明では、タグ(tag)及び属性(attribute)を区分して説明するが、本発明の詳細な説明で、タグによって定義される項目を、タグではない属性によって定義したり、本発明の詳細な説明で、属性によって定義される項目を、属性ではないタグによって定義することができることは、本発明が属する技術分野で当業者であるならば、容易に分かるであろう。
【0097】
図3を参照すれば、コンテンツについての情報は、「Title」、「Synopsis」、「OriginSite」、「ContentURL」タグなどを含んでもよい。
【0098】
従来技術によるメディアデータのストリーミングは、1つのコンテンツを所定の品質にエンコーディングして1つのメディアデータを生成するので、従来技術によるコンテンツについての情報(特に、OIPFによるCAD)は、コンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含まない。
【0099】
しかし、本発明の一実施形態によるコンテンツについての情報は、1つのコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むが、図3に図示された実施形態の「Tracks」タグ、「RefData」タグ及び「Fragments」タグがこれに該当する。
【0100】
図4Aは、本発明の一実施形態による複数のメディアデータを定義するための情報を図示している。
【0101】
図4Aを参照すれば、「Tracks」タグは、コンテンツを異なる品質にエンコーディングして生成された複数のメディアデータを区分するための情報である。「Tracks」タグは、複数のメディアデータそれぞれに割り当てられた「ID」属性(attribute)、「Type」属性及び「BitRate」属性を含む。
【0102】
「ID」属性は、メディアデータに対して順に付与される識別子を定義し、「Type」属性は、メディアデータのオーディオデータ、ビデオデータ、ビデオ/オーディオデータ、字幕データのうち、いずれのデータに該当するかを定義する。「Type」属性が「Packed」であるならば、メディアデータが、ビデオ/オーディオデータであることを示し、「Type」属性が「Video」であるならば、メディアデータが、ビデオデータであることを示す。「BitRate」属性は、ビデオデータのエンコーディングに利用されたビット率を定義する。
【0103】
図4Bは、本発明の一実施形態によるメディアデータのヘッダについての情報を図示している。
【0104】
図4Bを参照すれば、「RefData」タグは、「Type」属性及び「ID」属性を含む。「Type」属性は、ヘッダがいかなるメディアフォーマットのヘッダであるかを定義する。例えば、「Type」属性が「HEAD−TS」であるならば、ヘッダが、伝送ストリーム(transport stream)フォーマットのヘッダであることを示す。「ID」属性は、ヘッダが、複数のメディアデータのうち、いずれのメディアデータのヘッダであるかを定義する。「ID」属性が「1」であるならば、メディアデータ識別子が「1」であるメディアデータに係わるヘッダであることを示す。また、「RefData」タグは、ヘッダを指示(pointing)する情報を含むが、「URL」タグは、ヘッダの位置、すなわち、URLを定義する。
【0105】
「RefData」タグは、選択的な要素である。ヘッダが、メディアデータと分離されて別途のファイルで存在する場合にのみ、コンテンツについての情報に「RefData」タグが含まれ、メディアデータと結合されて存在する場合には、コンテンツについての情報に「RefData」タグが含まれない。
【0106】
図4Cは、本発明の一実施形態による複数のメディアデータそれぞれに含まれた少なくとも1つの部分についての情報を含む。以下、複数の「Fragment」は、図15Aの「Segment」または図15Bの「Slice」に対応する。
【0107】
図4Cを参照すれば、「Fragments」タグの下位タグである「Fragment」タグに、複数のメディアデータそれぞれに含まれた少なくとも1つの部分についての情報が含まれる。
【0108】
「Fragments」タグは、「NextFragmentsXMLURL」属性を含む。ライブ・ストリーミングのように、1つのコンテンツ・ストリーミングが完了すれば、次のコンテンツが続いてストリーミングされる場合には、次にストリーミングされるコンテンツについての情報をクライアント130があらかじめ知っていてこそ、途切れなくコンテンツをストリーミングすることができる。従って、「Fragments」タグは、次にストリーミングされるコンテンツについての情報を「NextFragmentsXMLURL」属性と定義する。次に、ストリーミングされるコンテンツに係わる複数のメディアデータのURLが、「NextFragmentsXMLURL」属性と定義することができる。
【0109】
「Fragment」タグは、現在ストリーミングされるコンテンツの少なくとも1つの部分についての情報を含む。図4Cに図示された実施形態を例に挙げて説明すれば、第1メディアデータとして、コンテンツを第1品質にエンコーディングして生成された最初の部分である「slice1−1.as」のURL情報が、「URL」タグによって定義され、対応するヘッダの識別子が、「RefPointer」タグによって定義される。また、最初の部分の開始時間が「StartTime」属性によって定義され、それぞれの部分の持続時間が「Duration」属性によって定義される。第1メディアデータの品質は、「BitRate」属性によって定義される。
【0110】
図4Cに図示された実施形態では、「Fragments」タグは、それぞれのメディアデータが1つの部分だけを含む場合を図示した。しかし、本発明が属する技術分野で当業者であるならば、図1と関連して説明したように、それぞれのメディアデータが複数の部分に分割される場合、1つの「Fragments」タグが2以上の部分についての情報を含むことができることが容易に分かるであろう。
【0111】
再び図2Aを参照すれば、段階220でクライアント130は、複数のメディアデータのうち、少なくとも1つのメディアデータを伝送することをサーバ120に要請する。複数のメディアデータは、1つのコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータである。クライアント130は、複数のメディアデータのうちから、ストリーミング環境に適した品質に符号化した少なくとも1つのメディアデータを選択し、サーバ120に要請する。クライアント130は、コンテンツについての情報に含まれた複数のメディアデータについての情報に基づいて、HTTP要請をサーバ120に伝送することができる。
【0112】
コンテンツについての情報は、図4Cと関連して説明したように、「Fragments」タグを含んでいる。従って、クライアント130は、「Fragments」タグに含まれたURL情報に基づいて選択されたメディアデータの伝送をサーバ120に要請する。
【0113】
クライアント130の要請によってサーバ120は、メディアデータを伝送する。要請されたメディアデータの少なくとも1つの部分をクライアント130に伝送することができる。HTTP要請に対するHTTP応答として、要請されたメディアデータを、クライアント120に伝送することができる。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように部分化され、少なくとも1つの部分を含むメディアデータであってもよい。
【0114】
図2Bは、本発明の他の実施形態によるストリーミング方法を説明するためのフローチャートである。図2Bは、ヘッダがメディアデータと分離され、別途のファイルとして存在する場合のストリーミング方法を図示している。
【0115】
図2Bを参照すれば、段階212でクライアント130は、所定のコンテンツについての情報を伝送することをサーバ120に要請し、サーバ120からコンテンツについての情報を伝送する。図2Aの段階210に図示される。図4Bと関連して述べた「RefData」タグを含むコンテンツについての情報を受信する。
【0116】
段階222でクライアント130は、段階210で受信されたコンテンツについての情報に基づいて、複数のメディアデータのうち、選択されたメディアデータのヘッダを要請する。段階212で受信されたコンテンツについての情報に基づいて、複数のメディアデータのうち、ストリーミング環境に適した少なくとも1つのメディアデータを選択して選択されたメディアデータのヘッダを要請する。段階212で受信されたコンテンツについての情報に含まれた「RefData」タグを参照して選択されたメディアデータのヘッダを要請する。
【0117】
サーバ120は、要請されたメディアデータのヘッダをクライアント130に伝送する。ヘッダファイルをクライアント130に伝送することができ、ヘッダファイルは、XMLファイルであってもよい。また、ヘッダは、複数のメディアデータ全体に係わるヘッダとして、図15B、図18B及び図18Cに図示された「reference data」であってもよい。
【0118】
段階232でクライアント130は、段階212で受信されたコンテンツについての情報及び段階222で受信されたヘッダに基づいて選択されたメディアデータの伝送を、サーバ120に要請する。メディアデータを時間に基づいて分割して生成された少なくとも1つの部分を伝送することをサーバ130に要請し、サーバ120は、要請された少なくとも1つの部分をクライアント130に伝送する。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように部分化され、少なくとも1つの部分を含むメディアデータであってもよい。
【0119】
図5Aは、本発明の他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【0120】
図5Aを参照すれば、段階510でクライアント130は、所定のコンテンツについての情報を伝送することをサーバ120に要請し、サーバ120からコンテンツについての情報を伝送する。所定のコンテンツについての情報を伝送することを要請するHTTP要請をサーバ120に伝送し、これに対するHTTP応答として、コンテンツについての情報を受信する。コンテンツについての情報を含むXMLファイルを受信することができる。段階510でクライアント130が受信するコンテンツについての情報は、図2の段階210でクライアント130が受信するコンテンツについての情報と異なるが、図6及び図7を参照して詳細に説明する。
【0121】
図6は、本発明の他の実施形態によるコンテンツについての情報を含むファイルのスキーマを図示している。
【0122】
図6を参照すれば、本発明の一実施形態によるコンテンツについての情報は、図3と同一に、「Title」、「Synopsis」、「OriginSite」、「ContentURL」タグなどを含んでもよい。
【0123】
しかし、図3に図示された実施形態では、コンテンツについての情報が、「Tracks」、「RefData」及び「Fragments」タグを含むことによって、複数のメディアデータについての情報も共に含むのに対し、図6に図示された実施形態では、コンテンツについての情報が複数のメディアデータについての情報を含むのではなく、複数のメディアデータについての情報を含むファイル(以下、media presentation description:「メディア表現記述」とする)のURLだけ定義するのが異なる。「ContentURL」タグによって、メディア表現記述のURLこの定義される。
【0124】
図6に図示されているように、従来技術による多様なコンテンツについての情報ファイルのスキーマを大きく変更せず、メディア表現記述のURLのみコンテンツについての情報ファイルに挿入することによって、多様なメディアデータ・フォーマットとの互換性を維持しつつ、ストリーミング環境に適応的なストリーミングが可能になる。
【0125】
図6に図示されたところによれば、コンテンツについての情報は、複数のメディアデータについての情報は含まずに、ストリーミング方法と関連した情報だけ含んでもよい。言い換えれば、「ContentURL」タグは、ストリーミングに利用されるメディアデータのフォーマットを定義する「MediaFormat」属性、メディアデータの種類を定義する「MIMEType」属性などを含んでもよい。
【0126】
特に、「ContentURL」タグは、コンテンツのストリーミングがいかなるサービスと関連しているかを定義する「TransferType」属性を含んでもよい。「TransferType」属性は、コンテンツのストリーミングがCoD(Content on Delivery)サービス、生中継(live)、適応ストリーミング生中継(adaptive streaming live)及び適応ストリーミングCoD(adaptive streaming CoD)のうち、いかなるサービスと関連しているかを定義することができる。
【0127】
図7は、本発明の他の実施形態によるコンテンツについての情報を図示している。図7は、OIPF標準によるCADであってもよい。
【0128】
図7を参照すれば、図6に図示されたスキーマによって生成されたコンテンツについての情報は、「ContentURL」タグに、メディア表現記述のURLが定義される。「http://asexample.com/vod/movies/18888/Meta/MainMeta.xml」がメディア表現記述のURLである。また、図6と関連して説明したように、「MediaFormat」属性、「MIMEType」属性及び「TransferType」属性などが「ContentURL」タグに定義される。
【0129】
再び図5Aを参照すれば、段階520でクライアント130は、段階510で受信されたコンテンツについての情報に基づいて、複数のメディアデータについての情報をサーバ120に要請する。メディア表現記述を、HTTP要請を介してサーバ120に要請し、HTTP応答として、メディア表現記述を受信することができる。
【0130】
段階510で、クライアント130がサーバ120から受信したコンテンツについての情報は、図6及び図7と関連して説明したように、メディア表現記述のURL情報を含むことができるが、クライアント130は、コンテンツについての情報の「ContentURL」タグを参照し、メディア表現記述をサーバ120に要請して受信する。メディア表現記述については、図8A、図8B、図9Aないし図9Hを参照して詳細に説明する。
【0131】
図8A及び図8Bは、本発明の一実施形態によるメディア表現記述のスキーマを図示している。メディア表現記述は、OIPF標準によるメディア表現記述であってもよい。
【0132】
図8Aを参照すれば、本発明の一実施形態によるメディア表現記述は、複数のメディアデータのURLに係わるテンプレート(template)タグ、ヘッダの位置を定義するためのタグ、ストリーミングがいかなるサービスと関連しているかを定義するためのタグ、メディアデータコンテナ(container)・フォーマットを定義するためのタグ、及び複数のメディアデータを定義するためのタグを含む。
【0133】
「urlTemplate」タグは、複数のメディアデータに係わるURL情報の共通部分を定義する。例えば、「http://example.com/vod/movie/18888/Track/{TrackID}/Segments/{SegmentID}」がURLテンプレートであるならば、「TrackID」及び「SegmentID」に、複数のメディアデータそれぞれの識別子及びそれぞれのメディアデータに含まれた少なくとも1つの部分の識別子を代入することにより、メディアデータに係わるURLを定義することができる。
【0134】
「headerUrl」タグは、図4Bと関連して述べた「RefData」タグに対応する。言い換えれば、複数のメディアデータのヘッダURLを定義する。
【0135】
「isLive」タグは、ストリーミングがいかなるサービスと関連しているかを定義するタグである。例えば、「isLive」タグが「Live」と定義されれば、ストリーミングが生放送サービスと関連していることを示し、「isLive」タグが「CoD」と定義されれば、ストリーミングがCoDサービスと関連していることを示す。
【0136】
「contentType」タグは、ストリーミングに利用されるメディアデータのコンテナ・フォーマットを定義する。例えば、メディアデータのコンテナ・フォーマットが、MP4フォーマットであるか、あるいはMPEG2−TSフォーマットであるか示すための情報であってもよい。
【0137】
「Stream」タグは、複数のメディアデータそれぞれについて生成され、複数のメディアデータそれぞれを定義する。1つのコンテンツを異なる品質にエンコーディングして生成された複数のメディアデータそれぞれを定義するために、「streamName」属性、「Type」属性、「bitrate」属性、「startTime」属性、「firstIntervalNum」属性、「duration」属性、及び「intervalCount」属性を含む。
【0138】
「streamName」属性は、メディアデータの名称を定義する。メディアデータの識別子であってもよい。「type」属性は、メディアデータの類型を定義する。メディアデータがオーディオデータ、ビデオデータ、オーディオ/ビデオデータ及び字幕データのうち、いかなるメディアのデータであるかを定義する。メディアデータが、変速再生(trick play)のために、Iフレームに係わるデータだけ含む場合には、これについての情報が「type」属性と定義される。
【0139】
「bitrate」属性は、メディアデータのビット率を定義し、「startTime」属性は、メディアデータの開始時間を特定するタイムスタンプを定義し、「firstIntervalNum」属性は、最初の始まる部分の番号を定義する。
【0140】
「duration」属性は、メディアデータに含まれた部分の持続時間を定義し、「intervalCount」属性は、メディアデータに含まれた少なくとも1つの部分の全体個数を定義する。
【0141】
「Segment」タグは、「Stream」タグの下位タグであり、メディアデータが、前述のように、コンテンツを所定の品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分であるならば、かような少なくとも1つの部分それぞれを定義する。
【0142】
「IntNum」属性は、部分の番号を定義し、「StartTime」は、該当部分の開始時間を定義する。「Duration」は、該当部分の持続時間を定義し、「url」は、該当部分のURL情報を定義する。
【0143】
「Segment」タグは、選択的なタグであり、メディアデータに含まれた少なくとも1つの部分についての情報が、「Stream」タグの他の属性から類推される場合には、メディア表現記述に含まれない。言い換えれば、「Stream」タグに定義された「startTime」属性、「firstIntervalNum」属性、「duration」属性及び「intervalCount」属性によって、「Segment」タグの内容が類推される場合には、メディア表現記述に含まれない。また、「urlTemplate」タグに所定のテンプレートが定義されており、このように定義されたテンプレートに、複数のメディアデータそれぞれの識別子及びそれぞれのメディアデータに含まれた少なくとも1つの部分の識別子を代入することにより、部分のURL情報を類推することができれば、「Segment」タグの「url」属性は、不要でもある。
【0144】
図8Bを参照すれば、本発明の他の実施形態によるメディア表現記述は、「nextManifestURL」タグをさらに含んでもよい。前述のように、ライブ・ストリーミングまたは広告の挿入のように、1つのコンテンツ・ストリーミングが完了すれば、次のコンテンツが続いてストリーミングされる場合には、次にストリーミングされるコンテンツについての情報を、クライアント130があらかじめ知っていてこそ、途切れなくコンテンツをストリーミングすることができるので、現在ストリーミング中であるコンテンツ後に、ストリーミングされるコンテンツのメディア表現記述のURL情報が「nextManifestURL」タグによって定義される。
【0145】
図9Aないし図9Hは、本発明の一実施形態によるメディア表現記述を図示している。
【0146】
図9Aを参照すれば、本発明の一実施形態によるメディア表現記述は、「URLTemplate」タグ、「RefDataURL」タグ及び複数のメディアデータそれぞれを定義する複数のタグを含む。
【0147】
「URLTemplate」タグ及び「RefDataURL」タグは、それぞれ図8A及び図8Bの「urlTemplate」タグ及び「RefDataURL」タグに対応する。
【0148】
「ID」属性、「Type」属性、「bitrate」属性、「StartTime」属性、「SegmentDuration」属性、「SegmentStartID」属性及び「SegmentCount」属性は、それぞれ図8A及び図8Bの「streamName」属性、「type」属性、「bitrate」属性、「startTime」属性、「Stream」タグの「duration」属性、「Stream」タグの「firstIntervalNum」属性及び「intervalCount」属性に対応する。
【0149】
図9Aに図示されたメディア表現記述は、コンテンツを異なる品質に生成された3種のビデオデータ、1つのオーディオデータ及び変速再生のためにIフレームだけエンコーディングして生成されたメディアデータについての情報を含む。
【0150】
図9Bを参照すれば、本発明の一実施形態によるメディア表現記述は、「NextAdaptiveControlURL」タグをさらに含む。「NextAdaptiveControlURL」タグは、図8Bの「nextManifestURL」タグに対応する。従って、現在再生中であるコンテンツの次に、続いて再生するコンテンツのメディア表現記述のURLが「NextAdaptiveControlURL」タグによって定義される。
【0151】
図9Cは、現在再生中であるコンテンツに続いて再生するコンテンツのメディア表現記述のURLが、図9Bの「NextAdaptiveControlURL」タグによって定義されたとき、次に続いて再生するコンテンツのメディア表現記述を図示する。図9Bのメディア表現記述と比較すれば、図9Cは、次に続いて再生されるコンテンツのメディア表現記述であるから、「StartTime」属性の現在再生中であるコンテンツのメディア表現記述と異なる。
【0152】
図9D及び図9Eは、ユーザの高画質ビデオ再生を選択的に制御するためのメディア表現記述を図示する。1つのコンテンツを5種の異なる品質にエンコーディングして複数のメディアデータが生成され、図9Dは、その場合、メディア表現記述を図示する。しかし、図9Eに図示されたメディア表現記述で、高品質にエンコーディングされたビデオについての情報を含んでいるタグ、すなわち、「ID」属性が「5」であるメディアデータの「StartTime」属性及び「SegmentCount」属性が、図9Dのメディア表現記述と異なる。
【0153】
サーバ120は、クライアント130のユーザ等級によって、図9Dのメディア表現記述または図9Eのメディア表現記述を選択的に伝送することができる。クライアント130のユーザ等級が高い場合(例えば、クライアント130が有料ユーザである場合)には、図9Dのメディア表現記述を伝送することによって、高品質のビデオも自由に再生させ、クライアント130のユーザ等級が低い場合(例えば、クライアント130が無料ユーザである場合)には、図9Eのメディア表現記述を伝送することによって、高品質のビデオは、「StartTime」属性によって定義された時間から、「SegmentCount」属性によって定義された部分のみ再生させる。
【0154】
図9Fは、コンテンツに広告が挿入される場合のメディア表現記述を図示している。図9Fを参照すれば、メディア表現記述は、「StartTime」属性が異なる広告コンテンツ及びメインコンテンツについての情報を含んでもよい。メディア表現記述は、「00:00:00」から「00:02:00」まで再生されるビット率が「500000」である広告コンテンツについての情報、及び「00:02:00」から再生されるビット率が「1000000」、「2000000」、「3000000」及び「4000000」であるメインコンテンツについての情報を含んでもよい。サーバ120が、広告コンテンツを1つのビット率によってエンコーディングしてクライアント130に提供し、広告コンテンツと「StartTime」属性を異にするメインコンテンツは、4種の異なるビット率によってエンコーディングしてクライアント130に提供する場合、図9Fのメディア表現記述が、サーバ120からクライアント130に伝送される。
【0155】
図9Gは、本発明の一実施形態による広告コンテンツについての情報を含むメディア表現記述を図示している。メインコンテンツを提供するサーバと、広告コンテンツを提供するサーバとが異なってもよい。言い換えれば、クライアント130が、メインコンテンツは、図5Aのサーバ120から提供され、広告コンテンツは、図5Aのサーバ120ではない他のサーバから受信する場合、広告コンテンツについての情報を含むメディア表現記述は、広告コンテンツのURL情報を含んでもよい。図9Gに図示されているように、1つの品質に符号化した広告コンテンツのURL情報が、メディア表現記述に含まれてもよい。
【0156】
図9Hは、本発明の一実施形態による言語情報及び字幕情報を含むメディア表現記述を図示している。図9Hを参照すれば、オーディオデータは、多重言語についての情報を含んでもよい。「ID」属性が「4」及び「5」である多重言語のオーディオデータについての情報がメディア表現記述に含まれ、「ID」属性が「6」及び「7」である多重言語の字幕についての情報が、メディア表現記述に含まれてもよい。
【0157】
オーディオデータは、もちろん字幕も時間によって、複数の部分に分割されるので、ストリーミング最中に、オーディオデータ及び字幕を異なる言語のオーディオデータ及び字幕に変更することができる。
【0158】
再び図5Aを参照すれば、段階530でクライアント130は、複数のメディアデータのうち、少なくとも1つのメディアデータを伝送することをサーバ120に要請する。クライアント130は、複数のメディアデータについての情報を参照し、ストリーミング環境に適した品質に符号化した少なくとも1つのメディアデータを選択してサーバ120に要請する。クライアント130は、所定のメディアデータを伝送することを要請するHTTP要請をサーバ120に伝送することができる。クライアント120の要請によってサーバ120は、メディアデータを伝送する。コンテンツを所定の品質にエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分を、クライアント120に伝送することができる。HTTP要請に対するHTTP応答として、要請されたメディアデータをクライアント120に伝送することができる。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように、部分化されて少なくとも1つの部分を含むメディアデータであってもよい。
【0159】
図5Bは、本発明の他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【0160】
図5Bを参照すれば、段階512でクライアント130は、所定のコンテンツについての情報を伝送することをサーバ120に要請し、サーバ120からコンテンツについての情報を受信する。所定のコンテンツについての情報を伝送することを要請するHTTP要請をサーバ120に伝送し、これに対するHTTP応答として、コンテンツについての情報を受信する。コンテンツについての情報を含むXMLファイルを受信することができる。
【0161】
段階522でクライアント130は、段階512で受信されたコンテンツについての情報に基づいて、複数のメディアデータについての情報をサーバ120に要請する。メディア表現記述を、HTTP要請を介してサーバ120に要請し、HTTP応答として、メディア表現記述を受信することができる。
【0162】
段階532でクライアント130は、段階522で受信された複数のメディアデータについての情報に基づいて、選択されたメディアデータのヘッダを要請する。段階522で受信された情報に基づいて、複数のメディアデータのうち、ストリーミング環境に適した少なくとも1つのメディアデータを選択し、選択されたメディアデータのヘッダを要請する。段階522で受信された複数のメディアデータについての情報を参照し、選択されたメディアデータのヘッダを要請する。サーバ120は、要請に対する応答として、選択されたメディアデータのヘッダファイルをクライアント130に伝送する。ヘッダは、複数のメディアデータ全体に係わるヘッダとして、図15B、図18B及び図18Cに図示された「reference data」であってもよい。
【0163】
段階542でクライアント130は、段階522で受信された複数のメディアデータについての情報、及び段階222で受信されたヘッダに基づいて選択されたメディアデータの伝送を、サーバ120に要請する。コンテンツを所定の割合でエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分を伝送することをサーバ130に要請し、サーバ120は、要請された少なくとも1つの部分をクライアント130に伝送する。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように、部分化されて少なくとも1つの部分を含むメディアデータであってもよい。
【0164】
図10Aないし図10Cは、本発明の一実施形態による複数のメディアデータを図示している。図10Aないし図10Cは、図5A及び図5Bによるストリーミング方法を遂行するために、サーバ120が保有する複数のメディアデータを図示している。
【0165】
図10Aを参照すれば、ストリーミング環境に適応的なストリーミングのためにサーバ120は、1つのコンテンツを複数の異なる品質にエンコーディングして生成された複数のメディアデータ1010ないし1030を保有することができる。「Track1」、「Track2」、…、「TrackN」が複数のメディアデータである。また、それぞれのメディアデータは、それぞれのメディアデータを時間に基づいて分割して生成された少なくとも1つの部分を含んでもよい。「Slice1−1.as」、「Slice1−2.as」、「Slice1−3.as」、「Slice2−1.as」、「Slice2−2.as」、「Slice2−3.as」、「SliceN−1.as」、「SliceN−2.as」、「SliceN−3.as」などが少なくとも1つの部分である。
【0166】
また、サーバ120は、クライアント130が複数のメディアデータにアクセスするために必要な情報1040を保有することができる。コンテンツについての情報として、「CadMeta.xml」ファイル、複数のメディアデータについての情報として、「MainMeta.xml」ファイルを保有することができ、複数のメディアデータのヘッダとして、「Head1.ref」、「Head2.ref」ファイルなどを保有することができる。「Head1.ref」は、「Track1」のヘッダファイルであって、「Head2.ref」は、「Track2」のヘッダファイルである。
【0167】
「CadMeta.xml」は、OIPF標準によるCADファイルであって、「MainMeta.xml」は、前述のメディア表現記述であってもよい。また、「Head1.ref」、「Head2.ref」ファイルは、選択的な要素であり、ヘッダが複数のメディアデータ1010ないし1030に含まれている場合には、存在しないこともある。
【0168】
図10Bを参照すれば、クライアント130が複数のメディアデータにアクセスするために必要な情報1042は、「NextMeta.xml」をさらに含んでもよい。前述のように、「NextMeta.xml」は、現在再生中であるコンテンツに続いて再生される次のコンテンツのメディア表現記述であってもよい。前述のように、現在再生中であるメディア表現記述、すなわち、「MainMeta.xml」ファイルは、続いて再生するコンテンツのメディア表現記述のURL情報を含んでいるが、これに基づいてクライアント130は、「NextMeta.xml」ファイルにアクセスすることができる。
【0169】
図10Cを参照すれば、複数のメディアデータのヘッダは、1つのファイル1050に存在しうる。ヘッダファイルが複数のメディアデータそれぞれについて、複数で存在するのではなく、1つのヘッダファイル1050として、複数のメディアデータにアクセスするために必要な情報1044に含まれてもよい。
【0170】
例えば、複数のメディアデータそれぞれが、エレメンタリー・ストリーム(例えば、MPEG−2によるエレメンタリー・ストリーム)に対応するとき、ヘッダファイルは、PAT(program association table)及びPMT(program map table)のうち、少なくとも一つを含んでもよい。PAT及びPMTのうち少なくとも一つを、複数のメディアデータ1010ないし1030と分離して、1つのヘッダファイル1050を作り、メディア表現記述は、このヘッダファイル1050を指示(pointing)する情報を含んでもよい。指示情報は、ヘッダファイル1050のURL情報場でもあり、MPEG−2エレメンタリー・ストリームでヘッダファイル1050を含んでいる伝送ストリームパケットを特定するための情報でもある。ヘッダファイル1050は、複数のメディアデータ全体に係わるヘッダであり図15B、図18B及び図18Cに図示された「reference data」であってもよい。
【0171】
PAT及びPMTは、ヘッダファイル1050であり、メディアデータと分離されており、複数のメディアデータ1010ないし1030に含まれているが、含まれた位置と関係なしに、複数のメディアデータ1010ないし1030に含まれたエレメンタリー・ストリームの全体リストを含む。
【0172】
PSI、すなわち、PAT及びPMTが別途のペイロード・データと分離され、別途のヘッダに存在する場合は、図15Aと関連して述べた。しかし、PSIが複数のメディアデータ1010ないし1030に含まれているときには、1つのメディアデータを構成する部分それぞれにPSIを含めることによって、それぞれの部分がPSIに基づいて、独立して再生されることが可能になる。
【0173】
前述の段階532でクライアント130は、メディア表現記述を参照し、ヘッダファイル1050の指示情報を獲得し、指示情報に基づいて、ヘッダファイル1050を要請することができる。指示情報によって、ヘッダファイル1050を要請して受信した後、ヘッダファイル1050に含まれているPAT及びPMTのうち少なくとも一つに基づいて、複数のメディアデータのうち少なくとも一つを選択し、選択されたメディアデータをサーバ120に要請する。PAT及びPMTは、複数のメディアデータ1010ないし1030の全体リストを含む。
【0174】
図11Aは、本発明のさらに他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【0175】
図11Aを参照すれば、段階1110でクライアント130は、複数のメディアデータについての情報をサーバ120に要請する。メディア表現記述を、HTTP要請を介してサーバ120に要請し、HTTP応答として、メディア表現記述を受信することができる。クライアント130は、ストリーミング環境に適応的なストリーミングを行うために、1つのコンテンツを複数の異なる品質にエンコーディングして生成された複数のメディアデータについての情報を、サーバ120に要請して受信する。コンテンツについての情報の要請及び受信なしに、複数のメディアデータについての情報の要請及び受信が行われるという点が、図5Aに図示された実施形態と異なる。
【0176】
段階1120でクライアント130は、複数のメディアデータのうち、少なくとも1つのメディアデータを伝送することをサーバ120に要請する。クライアント130は、複数のメディアデータについての情報を参照し、ストリーミング環境に適した品質に符号化した少なくとも1つのメディアデータを選択してサーバ120に要請し、要請されたメディアデータをサーバ120から受信する。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように、部分化されて少なくとも1つの部分を含むメディアデータであってもよい。
【0177】
図11Bは、本発明のさらに他の実施形態によるストリーミング方法を説明するためのフローチャートである。
【0178】
図11Bを参照すれば、段階1112でクライアント130は、複数のメディアデータについての情報をサーバ120に要請し、要請に対する応答として、複数のメディアデータについての情報をサーバ120から受信する。メディア表現記述を、HTTP要請を介してサーバ120に要請し、HTTP応答として、メディア表現記述を受信することができる。
【0179】
段階1122でクライアント130は、段階1112で受信された複数のメディアデータについての情報に基づいて、選択されたメディアデータのヘッダを要請する。段階522で受信された複数のメディアデータについての情報を参照し、ストリーミング環境によって選択されたメディアデータのヘッダを要請する。サーバ120は、要請に対する応答として、選択されたメディアデータのヘッダを含むファイルを、クライアント130に伝送する。ヘッダは、複数のメディアデータ全体に係わるヘッダとして、図15B、図18B及び図18Cに図示された「reference data」であってもよい。
【0180】
段階1132でクライアント130は、段階1112で受信された複数のメディアデータについての情報、及び段階1122で受信されたヘッダに基づいて選択されたメディアデータの伝送を、サーバ120に要請する。コンテンツを所定の割合でエンコーディングし、時間に基づいて分割して生成された少なくとも1つの部分を伝送することをサーバ130に要請し、サーバ120は、要請された少なくとも1つの部分をクライアント130に伝送する。伝送されるメディアデータは、図15A、図15B及び図18Aないし図18Cに図示されているように、部分化されて少なくとも1つの部分を含むメディアデータであってもよい。
【0181】
図12Aないし図12Cは、本発明の他の実施形態による複数のメディアデータを図示している。図12Aないし図12Cは、図11A及び11Bによるストリーミング方法を遂行するために、サーバ120が保有する複数のメディアデータを図示している。
【0182】
図12Aを参照すれば、図10Aに図示された実施形態と同様に、ストリーミング環境に適応的なストリーミングのためにサーバ120は、1つのコンテンツを複数の異なる品質にエンコーディングして生成された複数のメディアデータ1010ないし1030を保有することができる。
【0183】
クライアント130が複数のメディアデータにアクセスするために必要な情報1240のみ異なるが、図10Aに図示された実施形態とは異なり、サーバ120は、コンテンツについての情報を除外した複数のメディアデータについての情報だけ含んでもよい。この場合、クライアント130は、コンテンツについての情報を、サーバ120ではない他のエンティティから受信し、コンテンツについての情報に基づいて、サーバ120が保有している複数のメディアデータにアクセスすることもできる。
【0184】
図12Bを参照すれば、クライアント130が複数のメディアデータにアクセスするために必要な情報1242は、図12Aの情報1240に「NextMeta.xml」をさらに含んでもよい。
【0185】
図12Cを参照すれば、複数のメディアデータのヘッダは、1つのファイル1250として存在しうる。ヘッダファイルが、複数のメディアデータそれぞれについて、複数で存在するのではなく、1つのヘッダファイル1250として、複数のメディアデータにアクセスするために必要な情報1244に含まれてもよい。ヘッダファイルは、図10Cのヘッダファイル1050に対応し、図10Cのヘッダファイル1050は、図15B、図18B及び図18Cと関連して述べた「reference data」に対応するということは、図10Cと関連して説明した。
【0186】
図13は、本発明の一実施形態によるサーバのメディアデータ伝送装置を図示している。
【0187】
図13を参照すれば、本発明の一実施形態によるサーバ120のメディアデータ伝送装置1300は、情報伝送部1310及びメディアデータ伝送部1320を含む。
【0188】
情報伝送部1310は、クライアント130から所定情報の伝送要請を受信し、これに対する応答として、要請された情報を伝送する。コンテンツについての情報及び複数のメディアデータについての情報のうち、少なくとも1つの伝送要請をクライアント130から受信し、要請された情報をクライアント130に伝送する。図2A、図2B、図5A、図5B、図11A及び図11Bに図示された実施形態によって、コンテンツについての情報及び複数のメディアデータについての情報のうち、少なくとも1つの伝送を要請するHTTP要請をクライアント130から受信し、HTTP応答として、要請された情報を伝送する。
【0189】
メディアデータ伝送部1320は、複数のメディアデータのうち、ストリーミング環境によって選択された少なくとも1つのメディアデータの伝送要請をクライアント130から受信し、要請されたメディアデータを、クライアント1320に伝送する。情報伝送部1310がクライアント130に伝送した複数のメディアデータについての情報に基づいて、選択されたメディアデータの伝送要請を受信する。サーバ120は、エンコーディング装置110から異なる品質にエンコーディングされた複数のメディアデータを受信して保有していて、要請されたメディアデータをクライアント130に伝送することもできる。また、クライアント130の伝送要請によって、リアルタイムでエンコーディング装置110からメディアデータを受信して、クライアント130に伝達することもできる。
【0190】
図14は、本発明の一実施形態によるクライアントのメディアデータ受信装置を図示している。
【0191】
図14を参照すれば、本発明の一実施形態によるクライアント130のメディアデータ受信装置1400は、情報受信部1410及びメディアデータ受信部1420を含む。
【0192】
情報受信部1410は、所定情報の伝送要請をサーバ120に伝送し、これに対する応答として、要請された情報をサーバ120から受信する。コンテンツについての情報及び複数のメディアデータについての情報のうち、少なくとも1つの伝送要請をサーバ120に伝送し、要請された情報を受信する。図2A、図2B、図5A、図5B、図11A及び図11Bに図示された実施形態によって、コンテンツについての情報及び複数のメディアデータについての情報のうち、少なくとも1つの伝送を要請するHTTP要請をサーバ120に伝送し、HTTP応答として、要請された情報を受信する。
【0193】
メディアデータ受信部1420は、複数のメディアデータのうち、ストリーミング環境によって選択された少なくとも1つのメディアデータの伝送要請をサーバ120に伝送し、要請されたメディアデータをクライアント1320から受信する。情報受信部1410がサーバ120から受信した複数のメディアデータについての情報に基づいて、ストリーミング環境によって選択されたメディアデータの伝送要請を伝送する。
【0194】
以上のように、本発明について、たとえ限定された実施形態と図面によって説明したとしても、本発明が前記の実施形態に限定されるものではなく、それらは、本発明が属する分野で当業者であるならば、かような記載から多様な修正及び変形が可能である。従って、本発明の思想は、特許請求の範囲によってのみ把握されるものであり、それと均等であるか、あるいは等価的な変形は、いずれも本発明の範囲に属すると言える。また、本発明によるシステムは、コンピュータで読み取り可能な記録媒体に、コンピュータで読み取り可能なコードとして具現することが可能である。
【0195】
例えば、本発明の例示的な実施形態によるサーバのストリーミング装置及びクライアントのストリーミング装置は、図13及び図14に図示されたような装置のそれぞれのユニットにカップリングされたバス、前記バスに結合された少なくとも1つのプロセッサを含んでもよい。また、命令、受信されたメッセージまたは生成されたメッセージを保存するために、前記バスに結合され、前述のような命令を遂行するための少なくとも1つのプロセッサにカップリングされたメモリを含んでもよい。
【0196】
また、コンピュータで読み取り可能な記録媒体は、コンピュータシステムによって読み取り可能なデータが保存されるあらゆる種類の記録装置を含む。記録媒体の例としては、ROM(read-only memory)、RAM(random-access memory)、CD−ROM、磁気テープ、フロッピー(登録商標)ディスク、光データ保存装置などを含む。また、コンピュータで読み取り可能な記録媒体は、ネットワークに連結されたコンピュータシステムに分散され、分散方式でコンピュータで読み取り可能なコードが保存されて実行される。
【符号の説明】
【0197】
110 エンコーディング装置
120 サーバ
130 クライアント
140 ネットワーク
Claims (15)
- メディアデータを受信する方法において、
コンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをサーバから受信する段階と、
前記受信されたファイルに基づいて前記複数のメディアデータのうち第1メディアデータに含まれた第1部分を受信する段階と、
前記受信されたファイルに基づいて前記第1メディアデータに含まれた少なくとも一つの部分のうち、前記第1部分の次の部分である第2部分と対応する第2メディアデータの第2部分を受信する段階と、を含み、
前記複数のメディアデータは、時間に基づいて複数の部分に分割され、
前記複数の部分には、それぞれ前記複数の部分の再生時間についての情報が含まれ、
前記ファイルは、前記第1メディアデータに含まれた少なくとも一つの部分と前記第2メディアデータに含まれた少なくとも一つの部分の再生時間を対応させるための時間調整情報を含むことを特徴とするメディアデータ受信方法。 - 前記複数のメディアデータは、
MPEG−2 TS(MPEG−2 transport stream)フォーマットによるメディアデータであり、
前記複数のメディアデータは、前記MPEG−2 TSのエレメンタリー・ストリームに対応することを特徴とする請求項1に記載のメディアデータ受信方法。 - 前記複数の部分のそれぞれは、少なくとも1つのPES(packetized elementary stream)を含み、1つのPESは、1つの部分にいずれも含まれることを特徴とする請求項2に記載のメディアデータ受信方法。
- 前記PESは、少なくとも1つの映像フレームまたは音声フレームに係わるデータを含むことを特徴とする請求項3に記載のメディアデータ受信方法。
- ランダム・アクセスポイントに係わる伝送ストリームは、ランダム・アクセスポイントに係わる伝送ストリームであることを示す情報を含むことを特徴とする請求項3に記載のメディアデータ受信方法。
- 前記受信されたファイルは、
前記複数のメディアデータと関連したPAT(program association table)及びPMT(program map table)のうち、少なくとも一つを参考にする情報をさらに含むことを特徴とする請求項2に記載のメディアデータ受信方法。 - 前記PAT及びPMTは、
初期化部分であり、前記複数のメディアデータと分離されていることを特徴とする請求項6に記載のメディアデータ受信方法。 - 前記PAT及びPMTのうち、少なくとも一つは、
前記複数のメディアデータ全体のリストを含むことを特徴とする請求項6に記載のメディアデータ受信方法。 - 前記複数のメディアデータは、複数のPID(packet ID)のそれぞれ異なる一つに割り当てられることを特徴とする請求項6に記載のメディアデータ受信方法。
- 前記複数のメディアデータは、それぞれのPTS(presentation time stamp)及びそれぞれのDTS(decoding time stamp)を含むPESから構成され、
前記それぞれのPTSと前記それぞれのDTSは、メディアデータの再生時間によって整列されることをさらに含むことを特徴とする請求項6に記載のメディアデータ受信方法。 - 前記複数の部分のそれぞれは、
少なくとも1つのGOP(group of pictures)に係わる少なくとも1つの伝送ストリームを含むことを特徴とする請求項2に記載のメディアデータ受信方法。 - メディアデータを伝送する方法において、
コンテンツをそれぞれ異なる品質にエンコーディングして生成される複数のメディアデータについての情報を含むファイルをクライアントに伝送する段階と、
前記伝送されたファイルを利用した前記クライアントの要請によって、前記複数の第1メディアデータのうち、第1メディアデータに含まれた第1部分を前記クライアントに伝送する段階と、
前記伝送されたファイルに基づいた前記クライアントの要請によって、前記第1メディアデータに含まれた少なくとも一つの部分のうち、前記第1部分の次の部分である第2部分と対応する第2メディアデータの第2部分を前記クライアントに伝送する段階と、を含み、
前記複数のメディアデータは、時間に基づいて複数の部分に分割され、
前記複数の部分には、それぞれ前記複数の部分の再生時間についての情報が含まれ、
前記ファイルは、前記第1メディアデータに含まれた少なくとも一つの部分と前記第2メディアデータに含まれた少なくとも一つの部分の再生時間を対応させるための時間調整情報を含むことを特徴とするメディアデータ伝送方法。 - メディアデータを受信する装置において、
コンテンツをそれぞれ異なる品質にエンコーディングして生成される複数のメディアデータについての情報を含むファイルをサーバから受信する情報受信部と、
前記受信されたファイルを利用し、前記複数のメディアデータのうち、第1メディアデータに含まれた第1部分を受信するメディアデータ受信部と、を含み、
前記メディアデータ受信部は、前記受信されたファイルに基づいて前記第1メディアデータに含まれた少なくとも一つの部分のうち、前記第1部分の次の部分である第2部分と対応する第2メディアデータの第2部分を受信し、
前記複数のメディアデータは、時間に基づいて複数の部分に分割され、
前記複数の部分には、それぞれ前記複数の部分の再生時間についての情報が含まれ、
前記ファイルは、前記第1メディアデータに含まれた少なくとも一つの部分と前記第2メディアデータに含まれた少なくとも一つの部分の再生時間を対応させるための時間調整情報を含むことを特徴とするメディアデータ受信装置。 - メディアデータを伝送する装置において、
コンテンツを異なる品質にエンコーディングして生成された複数のメディアデータについての情報を含むファイルをクライアントに伝送する情報伝送部と、
前記伝送されたファイルに基づいた前記クライアントの要請によって、前記複数のメディアデータのうち、第1メディアデータに含まれた第1部分を伝送するメディアデータ伝送部と、を含み、
前記メディアデータ伝送部は、前記伝送されたファイルに基づいた前記クライアントの要請によって、前記第1メディアデータに含まれた少なくとも一つの部分のうち、前記第1部分の次の部分である第2部分と対応する第2メディアデータの第2部分を伝送し、
前記複数のメディアデータは、時間に基づいて複数の部分に分割され、
前記複数の部分には、それぞれ前記複数の部分の再生時間についての情報が含まれ、
前記ファイルは、前記第1メディアデータに含まれた少なくとも一つの部分と前記第2メディアデータに含まれた少なくとも一つの部分の再生時間を対応させるための時間調整情報を含むことを特徴とするメディアデータ伝送装置。 - 請求項1ないし請求項11のうち、いずれか1項に記載の方法を実行するためのプログラムを記録したコンピュータで読み取り可能な記録媒体。
Applications Claiming Priority (17)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US26090609P | 2009-11-13 | 2009-11-13 | |
US61/260,906 | 2009-11-13 | ||
US26270809P | 2009-11-19 | 2009-11-19 | |
US61/262,708 | 2009-11-19 | ||
US26713109P | 2009-12-07 | 2009-12-07 | |
US61/267,131 | 2009-12-07 | ||
US31423310P | 2010-03-16 | 2010-03-16 | |
US61/314,233 | 2010-03-16 | ||
US31891610P | 2010-03-30 | 2010-03-30 | |
US61/318,916 | 2010-03-30 | ||
US38047710P | 2010-09-07 | 2010-09-07 | |
US38046110P | 2010-09-07 | 2010-09-07 | |
US61/380,477 | 2010-09-07 | ||
US61/380,461 | 2010-09-07 | ||
KR10-2010-0103721 | 2010-10-22 | ||
KR1020100103721A KR101777347B1 (ko) | 2009-11-13 | 2010-10-22 | 부분화에 기초한 적응적인 스트리밍 방법 및 장치 |
PCT/KR2010/008016 WO2011059273A2 (en) | 2009-11-13 | 2010-11-12 | Method and apparatus for adaptive streaming using segmentation |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015156368A Division JP6177843B2 (ja) | 2009-11-13 | 2015-08-06 | 部分化を利用した適応的なストリーミング方法及びその装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013511196A JP2013511196A (ja) | 2013-03-28 |
JP6116906B2 true JP6116906B2 (ja) | 2017-04-19 |
Family
ID=44362920
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012538764A Active JP6116906B2 (ja) | 2009-11-13 | 2010-11-12 | 部分化を利用した適応的なストリーミング方法及びその装置 |
JP2015156368A Active JP6177843B2 (ja) | 2009-11-13 | 2015-08-06 | 部分化を利用した適応的なストリーミング方法及びその装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015156368A Active JP6177843B2 (ja) | 2009-11-13 | 2015-08-06 | 部分化を利用した適応的なストリーミング方法及びその装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US10425666B2 (ja) |
EP (1) | EP2499792B1 (ja) |
JP (2) | JP6116906B2 (ja) |
KR (1) | KR101777347B1 (ja) |
CN (1) | CN102714624B (ja) |
WO (1) | WO2011059273A2 (ja) |
Families Citing this family (61)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101842201B1 (ko) * | 2010-04-19 | 2018-03-26 | 엘지전자 주식회사 | 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치 |
US20130298171A1 (en) * | 2010-11-18 | 2013-11-07 | Sharp Kabushiki Kaisha | Device for generating content data, method for generating content data, and recording medium |
US20130294747A1 (en) * | 2011-01-14 | 2013-11-07 | Sharp Kabushiki Kaisha | Content playing device, content playing method, distribution system, content playing program, recording medium, and data structure |
KR20120083747A (ko) * | 2011-01-18 | 2012-07-26 | 삼성전자주식회사 | 방송통신 융합형 서비스를 위한 전송 방법 및 장치 |
GB2491574B (en) * | 2011-06-02 | 2013-11-20 | Nds Ltd | Content insertion in adaptive streams |
WO2012125006A2 (ko) * | 2011-03-16 | 2012-09-20 | 한국전자통신연구원 | 레프리젠테이션을 사용하는 스트리밍 콘텐츠 제공 장치 및 방법 |
KR101781717B1 (ko) * | 2011-06-08 | 2017-10-23 | 코닌클리즈케 케이피엔 엔.브이. | 공간적으로-세그먼트된 콘텐츠 전달 |
KR101857416B1 (ko) * | 2011-06-13 | 2018-05-16 | 한국전자통신연구원 | 오버헤드를 최소화한 헤더를 가지는 패킷 기반의 미디어 데이터 전송 방법 |
KR20120138319A (ko) * | 2011-06-14 | 2012-12-26 | 삼성전자주식회사 | 멀티미디어 데이터 특징 정보를 이용하여 멀티미디어 서비스 데이터 패킷을 송신하는 방법 및 장치 |
WO2012173402A2 (ko) * | 2011-06-14 | 2012-12-20 | 삼성전자 주식회사 | 방송 시스템에서 컨텐트를 구성하는 방법 및 장치 |
WO2012177041A2 (ko) * | 2011-06-20 | 2012-12-27 | 엘지전자 주식회사 | 미디어 컨텐트 송수신 방법 및 그를 이용한 송수신 장치 |
CN102843335B (zh) * | 2011-06-20 | 2015-09-09 | 华为技术有限公司 | 流媒体内容的处理方法和设备 |
WO2013028565A1 (en) * | 2011-08-19 | 2013-02-28 | General Instrument Corporation | Encoder-aided segmentation for adaptive streaming |
KR101885852B1 (ko) | 2011-09-29 | 2018-08-08 | 삼성전자주식회사 | 컨텐트 전송 및 수신 방법 및 장치 |
EP2753045B2 (en) * | 2011-09-30 | 2018-06-13 | Huawei Technologies Co., Ltd. | Method and device for transmitting stream media |
KR20130040090A (ko) * | 2011-10-13 | 2013-04-23 | 삼성전자주식회사 | 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법 |
WO2013055162A2 (ko) * | 2011-10-13 | 2013-04-18 | 한국전자통신연구원 | 이종 ip 네트워크를 통한 미디어 코덱에 독립적인 미디어 데이터 전송 방법 |
WO2013119023A1 (ko) * | 2012-02-06 | 2013-08-15 | 한국전자통신연구원 | 이종망 네트워크에서 부호화된 미디어 데이터를 전송하는 시스템에 랜덤 액세스를 지원하는 엠엠티 애셋의 구조, 생성 방법 및 생성 장치 |
WO2013163464A1 (en) * | 2012-04-25 | 2013-10-31 | Huawei Technologies Co., Ltd. | Systems and methods for controlling client behavior in adaptive streaming |
GB2501513A (en) * | 2012-04-26 | 2013-10-30 | Ibm | Message handling in an enterprise service bus |
KR101501344B1 (ko) | 2012-05-02 | 2015-03-10 | 삼성전자주식회사 | 멀티미디어 서비스 송수신 방법 및 장치 |
EP2680527A1 (en) * | 2012-06-28 | 2014-01-01 | Alcatel-Lucent | Adaptive streaming aware node, encoder and client enabling smooth quality transition |
KR20140002447A (ko) * | 2012-06-29 | 2014-01-08 | 삼성전자주식회사 | 멀티미디어 시스템에서 적응적 미디어 구조 송수신 방법 및 장치 |
KR101947000B1 (ko) * | 2012-07-17 | 2019-02-13 | 삼성전자주식회사 | 방송 시스템에서 멀티미디어 데이터의 전송 특징 정보 전달 방법 및 장치 |
US9591513B2 (en) * | 2012-08-06 | 2017-03-07 | Vid Scale, Inc. | Rate adaptation using network signaling |
KR20150042255A (ko) * | 2012-08-22 | 2015-04-20 | 후아웨이 테크놀러지 컴퍼니 리미티드 | Mpeg-2 트랜스포트 스트림에서 iso-bmff 이벤트 박스의 캐리지 |
GB2505486B (en) * | 2012-08-31 | 2016-01-06 | Samsung Electronics Co Ltd | Streaming media |
WO2014039883A2 (en) * | 2012-09-07 | 2014-03-13 | Huawei Technologies Co., Ltd. | System and method for segment demarcation and identification in adaptive streaming |
JP6348251B2 (ja) * | 2012-09-13 | 2018-06-27 | サターン ライセンシング エルエルシーSaturn Licensing LLC | 端末装置、受信方法、およびプログラム |
US9813325B2 (en) | 2012-12-27 | 2017-11-07 | Comcast Cable Communications, Llc | Information stream management |
KR101758167B1 (ko) * | 2013-01-15 | 2017-07-14 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 미디어 콘텐츠의 적응 스트리밍을 위한 품질 정보의 사용 |
WO2014133589A1 (en) | 2013-03-01 | 2014-09-04 | Intel Corporation | Wireless local area network (wlan) traffic offloading |
US9900629B2 (en) * | 2013-03-13 | 2018-02-20 | Apple Inc. | Codec techniques for fast switching with intermediate sequence |
JP5641090B2 (ja) * | 2013-03-14 | 2014-12-17 | ソニー株式会社 | 送信装置、送信方法、受信装置および受信方法 |
US10382512B2 (en) | 2013-03-14 | 2019-08-13 | Microsoft Technology Licensing, Llc | Distributed fragment timestamp synchronization |
US9906785B2 (en) | 2013-03-15 | 2018-02-27 | Sonic Ip, Inc. | Systems, methods, and media for transcoding video data according to encoding parameters indicated by received metadata |
KR102290421B1 (ko) | 2013-04-05 | 2021-08-17 | 삼성전자주식회사 | 랜덤 엑세스를 위한 멀티 레이어 비디오 부호화 방법 및 그 장치, 랜덤 엑세스를 위한 멀티 레이어 비디오 복호화 방법 및 그 장치 |
US9705955B2 (en) * | 2013-04-18 | 2017-07-11 | Futurewei Technologies, Inc. | Period labeling in dynamic adaptive streaming over hypertext transfer protocol |
US9438654B2 (en) * | 2013-04-18 | 2016-09-06 | Futurewei Technologies, Inc. | Fragment interface into dynamic adaptive streaming over hypertext transfer protocol presentations |
US10284612B2 (en) | 2013-04-19 | 2019-05-07 | Futurewei Technologies, Inc. | Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol |
US9973559B2 (en) * | 2013-05-29 | 2018-05-15 | Avago Technologies General Ip (Singapore) Pte. Ltd. | Systems and methods for presenting content streams to a client device |
US9215080B2 (en) * | 2013-05-31 | 2015-12-15 | Broadcom Corporation | Adaptive bit rate distribution of multicast streams |
JP6605789B2 (ja) * | 2013-06-18 | 2019-11-13 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 送信方法、受信方法、送信装置、および、受信装置 |
JP2015015706A (ja) * | 2013-07-03 | 2015-01-22 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | データ送信方法、データ再生方法、データ送信装置およびデータ再生装置 |
AU2014294215B2 (en) * | 2013-07-22 | 2018-10-04 | Sony Corporation | Image processing device and method |
US20150127703A1 (en) * | 2013-10-31 | 2015-05-07 | Samsung Electronics Co., Ltd. | Name based media delivery and presentation system |
JP2015136057A (ja) * | 2014-01-17 | 2015-07-27 | ソニー株式会社 | 通信装置、通信データ生成方法、および通信データ処理方法 |
GB2528039A (en) * | 2014-07-01 | 2016-01-13 | Canon Kk | Method for identifying objects across time periods and corresponding device |
CN104317556B (zh) * | 2014-10-22 | 2018-03-16 | 华为技术有限公司 | 一种流式应用升级方法、主控节点及流计算系统 |
US9397712B2 (en) | 2014-12-18 | 2016-07-19 | Futurewei Technologies, Inc. | Systems and methods for transmitter receive band noise calibration for envelope tracking and other wireless systems |
WO2016107733A1 (en) * | 2014-12-31 | 2016-07-07 | British Telecommunications Public Limited Company | Improved multicast to unicast conversion |
US9813477B2 (en) * | 2015-01-26 | 2017-11-07 | T-Mobile Usa, Inc. | Adjusting quality level of media streaming |
US10367865B2 (en) | 2016-07-28 | 2019-07-30 | Verizon Digital Media Services Inc. | Encodingless transmuxing |
JP2018033018A (ja) * | 2016-08-25 | 2018-03-01 | 沖電気工業株式会社 | パケットストリーム生成装置、配信システム、パケットストリーム生成方法及びプログラム |
KR101819193B1 (ko) * | 2016-11-17 | 2018-01-16 | (주)판도라티비 | 실시간 파일 포맷 변환 스트리밍 서비스 방법 |
KR20200081161A (ko) * | 2018-12-27 | 2020-07-07 | (주)아이앤아이소프트 | 컨텐츠 스트리밍 장치, 시스템 및 방법 |
KR101998807B1 (ko) * | 2019-02-01 | 2019-07-11 | 삼성전자주식회사 | 방송 시스템에서 멀티미디어 데이터의 전송 특징 정보 수신 장치 |
EP3941079B1 (en) * | 2019-03-11 | 2024-04-24 | Sony Group Corporation | Information processing device, regeneration processing device, information processing method, and regeneration processing method |
CN112040302B (zh) | 2019-06-03 | 2023-01-03 | 优视科技有限公司 | 视频缓冲方法、装置、电子设备及计算机可读存储介质 |
CN113114687B (zh) * | 2021-04-14 | 2022-07-15 | 深圳维盟科技股份有限公司 | 一种iptv合流方法及系统 |
CN113259710B (zh) * | 2021-06-22 | 2021-09-21 | 北京百瑞互联技术有限公司 | 改进音频传输卡顿的方法、系统及介质 |
Family Cites Families (147)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0822061B2 (ja) | 1993-03-02 | 1996-03-04 | エヌ・ティ・ティ・データ通信株式会社 | 画像音声符号化デ−タ多重化装置および多重化デ−タ読み込み装置 |
US6122403A (en) * | 1995-07-27 | 2000-09-19 | Digimarc Corporation | Computer system linked by using information in data objects |
JP3377788B1 (ja) | 1995-09-29 | 2003-02-17 | 松下電器産業株式会社 | 再生方法、再生装置、記録方法、記録装置、光ディスク |
MY120755A (en) * | 1995-09-29 | 2005-11-30 | Matsushita Electric Ind Co Ltd | A method and an apparatus for interleaving bitstream to record thereof on a recording medium, and reproducing the interleaved bitstream therefrom |
JP3943674B2 (ja) * | 1996-10-25 | 2007-07-11 | キヤノン株式会社 | カメラ制御システム並びにカメラサーバ及びその制御方法 |
JP2000013761A (ja) | 1998-06-18 | 2000-01-14 | Sony Corp | 情報送信装置および方法、情報受信装置および方法、並びに提供媒体 |
WO2000017779A1 (fr) | 1998-09-17 | 2000-03-30 | Sony Corporation | Dispositif et procede d'affichage d'images |
JP4292654B2 (ja) | 1999-03-19 | 2009-07-08 | ソニー株式会社 | 記録装置および方法、再生装置および方法、並びに記録媒体 |
JP2001024994A (ja) | 1999-07-07 | 2001-01-26 | Matsushita Electric Ind Co Ltd | 送信装置、受信装置、記録装置及びプログラム記録媒体 |
US8341662B1 (en) | 1999-09-30 | 2012-12-25 | International Business Machine Corporation | User-controlled selective overlay in a streaming media |
US20020161739A1 (en) * | 2000-02-24 | 2002-10-31 | Byeong-Seok Oh | Multimedia contents providing system and a method thereof |
KR100872138B1 (ko) | 2000-02-24 | 2008-12-08 | 오병석 | 주문형 멀티미디어 콘텐츠 제공 시스템 및 방법 |
JP4529240B2 (ja) * | 2000-06-13 | 2010-08-25 | ソニー株式会社 | 情報処理装置および方法、情報処理システム、並びに記録媒体 |
US20050193425A1 (en) * | 2000-07-24 | 2005-09-01 | Sanghoon Sull | Delivery and presentation of content-relevant information associated with frames of audio-visual programs |
US7548565B2 (en) * | 2000-07-24 | 2009-06-16 | Vmark, Inc. | Method and apparatus for fast metadata generation, delivery and access for live broadcast program |
US7103668B1 (en) | 2000-08-29 | 2006-09-05 | Inetcam, Inc. | Method and apparatus for distributing multimedia to remote clients |
CA2429827C (en) | 2000-12-15 | 2009-08-25 | British Telecommunications Public Limited Company | Transmission and reception of audio and/or video material |
ATE464740T1 (de) * | 2000-12-15 | 2010-04-15 | British Telecomm | Übertagung von ton- und/oder bildmaterial |
US6907081B2 (en) * | 2001-03-30 | 2005-06-14 | Emc Corporation | MPEG encoder control protocol for on-line encoding and MPEG data storage |
FI20011871A (fi) | 2001-09-24 | 2003-03-25 | Nokia Corp | Multimediadatan prosessointi |
JP2003111048A (ja) | 2001-09-26 | 2003-04-11 | Ntt Software Corp | コンテンツ再生のためのサーバ及びプログラム |
US20030072376A1 (en) | 2001-10-12 | 2003-04-17 | Koninklijke Philips Electronics N.V. | Transmission of video using variable rate modulation |
KR100927967B1 (ko) | 2001-10-26 | 2009-11-24 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 공간 샤프니스 향상 기술들을 사용하는 공간 스케일가능압축 체계 |
EP1442602A1 (en) | 2001-10-26 | 2004-08-04 | Koninklijke Philips Electronics N.V. | Spatial scalable compression scheme using adaptive content filtering |
CN1625880B (zh) | 2002-01-30 | 2010-08-11 | Nxp股份有限公司 | 在具有可变带宽的网络上流式传输多媒体数据 |
JP2003235031A (ja) | 2002-02-08 | 2003-08-22 | Nippon Telegr & Teleph Corp <Ntt> | 映像情報提供方法,装置およびそのプログラム |
US20030204602A1 (en) * | 2002-04-26 | 2003-10-30 | Hudson Michael D. | Mediated multi-source peer content delivery network architecture |
JP2004013283A (ja) | 2002-06-04 | 2004-01-15 | Hitachi Ltd | コンテンツ配信方法及びコンテンツ配信装置 |
JP4954471B2 (ja) * | 2002-06-07 | 2012-06-13 | トムソン ライセンシング | ネットワークに接続された装置から別の装置へのデータの配信を制御する方法 |
JP2004088766A (ja) * | 2002-07-22 | 2004-03-18 | Matsushita Electric Ind Co Ltd | データ管理装置及びデータ管理システム |
DE60212383T2 (de) | 2002-08-27 | 2006-10-19 | Matsushita Electric Industrial Co., Ltd., Kadoma | Verfahren zur Übertragung von Datenströmen mit Datensegmenten variabler Länge |
KR100973861B1 (ko) * | 2002-09-25 | 2010-08-03 | 파나소닉 주식회사 | 재생장치, 기록매체, 재생방법 |
JP4127497B2 (ja) * | 2002-09-27 | 2008-07-30 | 富士フイルム株式会社 | ディジタル・サービス・システム |
JP2004140584A (ja) | 2002-10-17 | 2004-05-13 | Toshiba Corp | コンテンツ配信・再生システム、広告コンテンツ挿入方法及びクライアント端末 |
JP2004140654A (ja) | 2002-10-18 | 2004-05-13 | Nec Engineering Ltd | 画像データ転送方法及びシステム |
JP4209665B2 (ja) | 2002-12-02 | 2009-01-14 | パナソニック株式会社 | 受信装置及び受信方法 |
US20040119814A1 (en) * | 2002-12-20 | 2004-06-24 | Clisham Allister B. | Video conferencing system and method |
JP3976191B2 (ja) | 2003-01-07 | 2007-09-12 | 株式会社エヌ・ティ・ティ・ドコモ | サーバ、送信レート制御方法、プログラムおよび記録媒体 |
US7409702B2 (en) * | 2003-03-20 | 2008-08-05 | Sony Corporation | Auxiliary program association table |
JP2004312304A (ja) | 2003-04-04 | 2004-11-04 | Sony Corp | 復号化装置及びその方法、再生装置及びその方法並びに記憶メディア |
JP2004328204A (ja) | 2003-04-23 | 2004-11-18 | Canon Inc | 映像信号処理装置 |
EP1617660B1 (en) * | 2003-04-24 | 2012-08-29 | Sony Corporation | Information processing device and information processing method, program storage medium, and program |
US6895410B2 (en) | 2003-05-02 | 2005-05-17 | Nokia Corporation | Method and apparatus for providing a multimedia data stream |
KR20040096718A (ko) | 2003-05-10 | 2004-11-17 | 삼성전자주식회사 | 멀티미디어 데이터 재생장치, 오디오 데이터 수신방법 및오디오 데이터 구조 |
JP2004364227A (ja) | 2003-06-09 | 2004-12-24 | Sony Corp | 受信装置および選局方法、ならびに、ストリーム配信システム |
JP4346966B2 (ja) * | 2003-06-13 | 2009-10-21 | キヤノン株式会社 | 撮像装置 |
JP2005049834A (ja) * | 2003-07-11 | 2005-02-24 | Matsushita Electric Ind Co Ltd | メディアデータ表示装置、メディアデータ表示方法およびメディアデータ表示プログラム |
JP2005039667A (ja) | 2003-07-17 | 2005-02-10 | Sony Corp | データ送受信システム、データ受信装置、データ送信装置及びデータ送受信方法 |
JP2005073138A (ja) | 2003-08-27 | 2005-03-17 | Casio Comput Co Ltd | 情報再生装置および情報再生処理プログラム |
KR100547139B1 (ko) * | 2003-09-03 | 2006-01-26 | 학교법인 고황재단 | IETF QoS 프로토콜을 이용한 MPEG 미디어데이터 전송 방법 및 장치 |
US20050068992A1 (en) * | 2003-09-26 | 2005-03-31 | Kaku Vicky B. | Method and apparatus for high-speed data multiplexing |
KR100608715B1 (ko) * | 2003-09-27 | 2006-08-04 | 엘지전자 주식회사 | QoS보장형 멀티미디어 스트리밍 서비스 시스템 및 방법 |
EP2051510B1 (en) | 2003-10-30 | 2013-08-14 | Panasonic Corporation | Mobile-terminal-orientated transmission method and apparatus |
CN1830164A (zh) * | 2003-10-30 | 2006-09-06 | 松下电器产业株式会社 | 面向携带终端的传输方法以及装置 |
US20050102371A1 (en) | 2003-11-07 | 2005-05-12 | Emre Aksu | Streaming from a server to a client |
KR101244308B1 (ko) | 2003-12-08 | 2013-03-18 | 삼성전자주식회사 | 동영상 파일의 암호화 방법 및 그를 이용한 디지털 저작권관리방법 |
US20050183120A1 (en) * | 2004-01-13 | 2005-08-18 | Saurabh Jain | Multi-user personalized digital multimedia distribution methods and systems |
KR101022471B1 (ko) * | 2004-01-17 | 2011-03-16 | 삼성전자주식회사 | 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치 |
JP2005229153A (ja) | 2004-02-10 | 2005-08-25 | Sony Corp | 調光システムおよび調光方法、配信装置および配信方法、受信装置および受信方法、記録装置および記録方法、ならびに、再生装置および再生方法 |
KR101145261B1 (ko) | 2004-02-27 | 2012-05-24 | 삼성전자주식회사 | 멀티미디어 데이터를 기록한 정보저장매체, 그 재생방법및 재생장치 |
US7430222B2 (en) * | 2004-02-27 | 2008-09-30 | Microsoft Corporation | Media stream splicer |
JP2005303927A (ja) * | 2004-04-15 | 2005-10-27 | Sony Corp | 情報処理システム、情報処理装置および方法、記録媒体、並びにプログラム |
US7818444B2 (en) | 2004-04-30 | 2010-10-19 | Move Networks, Inc. | Apparatus, system, and method for multi-bitrate content streaming |
CN101014947A (zh) | 2004-04-30 | 2007-08-08 | 移动网络有限公司 | 一种关于流内容的自适应速率切换的装置、系统和方法 |
US20050262541A1 (en) * | 2004-05-21 | 2005-11-24 | Sony Corporation | Reception device, station selection method, and stream distribution system |
US20060037057A1 (en) * | 2004-05-24 | 2006-02-16 | Sharp Laboratories Of America, Inc. | Method and system of enabling trick play modes using HTTP GET |
US7930184B2 (en) * | 2004-08-04 | 2011-04-19 | Dts, Inc. | Multi-channel audio coding/decoding of random access points and transients |
CN100539672C (zh) * | 2004-08-17 | 2009-09-09 | 松下电器产业株式会社 | 图像编码装置和方法 |
US7543073B2 (en) * | 2004-12-10 | 2009-06-02 | Microsoft Corporation | System and process for performing an exponentially weighted moving average on streaming data to establish a moving average bit rate |
FR2882164A1 (fr) | 2005-02-11 | 2006-08-18 | Canon Kk | Procede et dispositif de transfert de donnees numeriques a format progressif |
US20080301380A1 (en) * | 2005-02-18 | 2008-12-04 | Masanori Itho | Data Processor |
CA2600874C (en) * | 2005-03-14 | 2015-04-07 | Nielsen Media Research, Inc. | Compressed domain encoding apparatus and methods for use with media signals |
EP1864222A4 (en) | 2005-03-29 | 2012-03-21 | Microsoft Corp | SYSTEM AND METHOD FOR TRANSFERRING DATA FROM A WEB PAGE |
JP4541962B2 (ja) | 2005-04-25 | 2010-09-08 | パナソニック株式会社 | 多重化装置、再生装置 |
JP4356645B2 (ja) * | 2005-04-28 | 2009-11-04 | ソニー株式会社 | 字幕生成装置及び方法 |
JP2007011584A (ja) | 2005-06-29 | 2007-01-18 | Fujifilm Holdings Corp | マルチメディアデータ処理装置、マルチメディアデータ処理方法及びマルチメディアデータ処理プログラム |
JP2007025959A (ja) | 2005-07-14 | 2007-02-01 | Fujifilm Holdings Corp | マルチメディアデータ処理装置、マルチメディアデータ処理方法及びマルチメディアデータ処理プログラム |
JP2007036666A (ja) | 2005-07-27 | 2007-02-08 | Onkyo Corp | コンテンツ配信システム、クライアント及びクライアントプログラム |
KR100716291B1 (ko) * | 2005-07-27 | 2007-05-09 | 삼성전자주식회사 | 영상재생장치와 그 제어방법 및 pvr |
JP2007080357A (ja) * | 2005-09-13 | 2007-03-29 | Toshiba Corp | 情報記憶媒体、情報再生方法、情報再生装置 |
CN1988547A (zh) | 2005-12-23 | 2007-06-27 | 腾讯科技(深圳)有限公司 | 一种在线播放媒体文件的方法、服务器及系统 |
WO2007078253A2 (en) * | 2006-01-05 | 2007-07-12 | Telefonaktiebolaget Lm Ericsson (Publ) | Media container file management |
JP2007207328A (ja) | 2006-01-31 | 2007-08-16 | Toshiba Corp | 情報記憶媒体、プログラム、情報再生方法、情報再生装置、データ転送方法、及びデータ処理方法 |
CN101025737B (zh) | 2006-02-22 | 2011-08-17 | 王东 | 基于关注度的同源信息搜索引擎聚合显示方法 |
JP2007274142A (ja) | 2006-03-30 | 2007-10-18 | Victor Co Of Japan Ltd | 映像送信装置及び映像送信方法 |
US20090100496A1 (en) * | 2006-04-24 | 2009-04-16 | Andreas Bechtolsheim | Media server system |
JP4910475B2 (ja) * | 2006-05-18 | 2012-04-04 | ソニー株式会社 | 記録装置、記録方法および記録プログラム、ならびに、撮像装置、撮像方法および撮像プログラム |
JP5001584B2 (ja) * | 2006-06-06 | 2012-08-15 | ソニー株式会社 | オーサリング装置、オーサリング方法、オーサリングプログラム、記録装置、記録方法および記録プログラム、検証装置、検証方法および検証プログラム、ならびに、記録媒体の製造装置および製造方法 |
US9432433B2 (en) | 2006-06-09 | 2016-08-30 | Qualcomm Incorporated | Enhanced block-request streaming system using signaling or block creation |
US20080040498A1 (en) | 2006-08-10 | 2008-02-14 | Nokia Corporation | System and method of XML based content fragmentation for rich media streaming |
JP4785687B2 (ja) | 2006-09-15 | 2011-10-05 | キヤノン株式会社 | 映像制御装置及びその方法 |
JP4862600B2 (ja) | 2006-10-12 | 2012-01-25 | パナソニック電工株式会社 | 住宅設備監視システム用表示装置 |
KR100805308B1 (ko) | 2006-10-13 | 2008-02-20 | 에스케이 텔레콤주식회사 | 이동통신 단말기에서의 컨텐츠 추천 서비스 방법 및 이를위한 이동통신 단말기 |
KR100842262B1 (ko) * | 2006-11-16 | 2008-06-30 | 한국전자통신연구원 | Iptv 서비스 또는 디지털 방송 환경에서의 방송 채널전환 가속 시스템 및 그 방법 |
EP2103129A4 (en) | 2006-11-20 | 2014-07-23 | Sk Planet Co Ltd | SYSTEM, SERVER AND METHOD FOR PROVIDING A SUPPLEMENTARY INFORMATION SERVICE RELATED TO EQUIPPED CONTENT |
CN100544439C (zh) | 2006-11-21 | 2009-09-23 | 华为技术有限公司 | 一种支持多种编码格式的媒体数据的方法及系统 |
US8458184B2 (en) | 2006-12-22 | 2013-06-04 | Apple Inc. | Tagging media assets, locations, and advertisements |
KR100810223B1 (ko) * | 2007-01-19 | 2008-03-06 | 삼성전자주식회사 | 단말 간 실시간 스트리밍 서비스 제공 시스템 및 방법 |
CN100551043C (zh) | 2007-02-08 | 2009-10-14 | 华为技术有限公司 | 一种快进快退播放视频数据的方法和流媒体服务器 |
JP5230112B2 (ja) | 2007-03-01 | 2013-07-10 | キヤノン株式会社 | 情報配信装置、情報配信方法及び情報配信プログラム |
US20080216135A1 (en) * | 2007-03-03 | 2008-09-04 | Howard Pfeffer | Methods and apparatus for improved content delivery including content delivery streams dynamically populated in response to user requests |
JP2008236667A (ja) | 2007-03-23 | 2008-10-02 | Victor Co Of Japan Ltd | デジタル放送受信装置 |
JP5086426B2 (ja) | 2007-04-23 | 2012-11-28 | エルジー エレクトロニクス インコーポレイティド | セキュリティレベルに基づくコンテンツ使用方法、コンテンツ共有方法及びデバイス |
KR101369747B1 (ko) | 2007-05-10 | 2014-03-06 | 삼성전자주식회사 | 정보저장매체, 비디오 컨텐츠 재생 장치 및 재생 방법 |
KR101517959B1 (ko) | 2007-05-11 | 2015-05-18 | 주식회사 비즈모델라인 | 적응형 스트리밍 방법 |
CN101321265B (zh) | 2007-06-07 | 2011-03-16 | 中兴通讯股份有限公司 | 对等网络媒体点播跨帧播放方式的实现方法及系统 |
EP2171615A2 (en) * | 2007-06-27 | 2010-04-07 | Dolby Laboratories Licensing Corporation | Incremental construction of search tree with signature pointers for identification of multimedia content |
JP4450021B2 (ja) * | 2007-07-05 | 2010-04-14 | ソニー株式会社 | 記録再生装置、記録装置、再生装置、記録方法、再生方法およびコンピュータプログラム |
JP4609802B2 (ja) | 2007-07-06 | 2011-01-12 | Necアクセステクニカ株式会社 | ホームゲートウェイ |
KR20090005845A (ko) * | 2007-07-10 | 2009-01-14 | 삼성전자주식회사 | 태그를 이용한 미디어 신호 재생 제어 방법 및 장치 |
BRPI0706005A2 (pt) * | 2007-07-24 | 2009-03-17 | Orbisat Da Amazonia Ind E Aero | método e sistema de difusão de serviços digitais com recepção particularizada por região |
US7694006B2 (en) * | 2007-07-27 | 2010-04-06 | Realnetworks, Inc. | System and method for distributing media data |
CN101365128A (zh) | 2007-08-10 | 2009-02-11 | 中兴通讯股份有限公司 | 综合视频业务对等网络系统 |
RU2477883C2 (ru) | 2007-08-20 | 2013-03-20 | Нокиа Корпорейшн | Сегментированные метаданные и индексы для потоковых мультимедийных данных |
US8386893B2 (en) * | 2007-08-24 | 2013-02-26 | Lg Electronics Inc. | Digital broadcasting system and method of processing data in digital broadcasting system |
KR101128848B1 (ko) | 2007-09-13 | 2012-03-23 | 에스케이플래닛 주식회사 | 멀티 앵글 모바일 방송 서비스를 제공하는 서버, 시스템 및방법 |
GB2465959B (en) * | 2007-09-25 | 2012-04-25 | Ericsson Telefon Ab L M | Method and arrangement relating to a media structure |
KR20090036765A (ko) | 2007-10-10 | 2009-04-15 | 삼성전자주식회사 | 와이브로 시스템에서 영상 데이터 전송을 위한 출력 비트레이트 설정 방법 |
US20090110060A1 (en) * | 2007-10-30 | 2009-04-30 | Mauricio Cortes | Method and apparatus for performing lower complexity multiple bit rate video encoding using metadata |
KR100889986B1 (ko) | 2007-11-30 | 2009-03-25 | 엔에이치엔(주) | 양방향 방송 단말기를 위한 추천 키워드 제공 시스템 및방법 |
KR101401967B1 (ko) * | 2007-12-04 | 2014-06-27 | 삼성전자주식회사 | 암호화된 데이터 스트림의 트릭 플레이 방법 및 장치 |
KR101529503B1 (ko) | 2007-12-14 | 2015-06-30 | 엘지전자 주식회사 | 콘텐츠 제공/다운로드 방법, 이를 위한 전자장치 및 콘텐츠서버 |
US8140390B2 (en) * | 2008-02-12 | 2012-03-20 | At&T Intellectual Property I, Lp | System and method for displaying partial advertising data during trick play |
CN101521583B (zh) | 2008-02-29 | 2012-07-04 | 华为技术有限公司 | 一种资源接纳控制方法、系统和装置 |
CN101247511B (zh) | 2008-03-21 | 2016-04-06 | 中国电信股份有限公司 | Iptv内容相关信息展现方法及系统 |
WO2009119394A1 (ja) | 2008-03-28 | 2009-10-01 | 日本電気株式会社 | 映像取得方法、映像取得装置、映像取得システム及び映像取得用プログラム |
US8208006B2 (en) * | 2008-04-10 | 2012-06-26 | Research In Motion Limited | Method and system for progressive delivery and synchronization of discrete content in rich media services |
US7925774B2 (en) * | 2008-05-30 | 2011-04-12 | Microsoft Corporation | Media streaming using an index file |
CN102396221B (zh) * | 2008-06-25 | 2015-03-25 | 思科技术公司 | 阻止特技模式操作的支持 |
US8387150B2 (en) | 2008-06-27 | 2013-02-26 | Microsoft Corporation | Segmented media content rights management |
KR20100007368A (ko) | 2008-07-14 | 2010-01-22 | 주식회사 케이티 | 스트리밍 서비스의 비트 레이트를 제어하기 위한 시스템 및그 방법 |
JP4798190B2 (ja) * | 2008-08-29 | 2011-10-19 | 株式会社日立製作所 | デジタル放送システム、及び、装置 |
TW201027978A (en) * | 2008-09-30 | 2010-07-16 | Panasonic Corp | Recording medium on which 3D video is recorded, playback apparatus for playing back 3D video, and system LSI |
US20100118938A1 (en) * | 2008-11-12 | 2010-05-13 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Encoder and method for generating a stream of data |
CN101459809B (zh) | 2008-11-26 | 2010-06-23 | 北京惠信博思技术有限公司 | 一种数字电视节目播放的方法和系统 |
US9009066B2 (en) * | 2009-02-12 | 2015-04-14 | Echostar Technologies L.L.C. | Advertisement management for live internet multimedia content |
US8621044B2 (en) * | 2009-03-16 | 2013-12-31 | Microsoft Corporation | Smooth, stateless client media streaming |
JP2009159625A (ja) | 2009-04-03 | 2009-07-16 | Hitachi Ltd | デジタル放送用ストリームの蓄積方法 |
US8205004B1 (en) * | 2009-06-26 | 2012-06-19 | Adobe Systems Incorporated | Multi-bit-rate streaming delivery |
US9680892B2 (en) * | 2009-06-26 | 2017-06-13 | Adobe Systems Incorporated | Providing integration of multi-bit-rate media streams |
US10410222B2 (en) * | 2009-07-23 | 2019-09-10 | DISH Technologies L.L.C. | Messaging service for providing updates for multimedia content of a live event delivered over the internet |
US9203816B2 (en) * | 2009-09-04 | 2015-12-01 | Echostar Technologies L.L.C. | Controlling access to copies of media content by a client device |
US9438861B2 (en) * | 2009-10-06 | 2016-09-06 | Microsoft Technology Licensing, Llc | Integrating continuous and sparse streaming data |
US9237387B2 (en) * | 2009-10-06 | 2016-01-12 | Microsoft Technology Licensing, Llc | Low latency cacheable media streaming |
US9749713B2 (en) * | 2009-10-15 | 2017-08-29 | Citrix Systems, Inc. | Budget encoding |
BR112012011581A2 (pt) | 2009-11-04 | 2017-09-19 | Huawei Tech Co Ltd | sistema e método para streaming de conteúdo de mídia |
US8862515B2 (en) * | 2010-05-04 | 2014-10-14 | Sony Corporation | Geographic internet asset filtering for internet video client |
-
2010
- 2010-10-22 KR KR1020100103721A patent/KR101777347B1/ko active IP Right Grant
- 2010-11-12 CN CN201080061413.0A patent/CN102714624B/zh active Active
- 2010-11-12 US US12/945,545 patent/US10425666B2/en active Active
- 2010-11-12 WO PCT/KR2010/008016 patent/WO2011059273A2/en active Application Filing
- 2010-11-12 JP JP2012538764A patent/JP6116906B2/ja active Active
- 2010-11-12 EP EP10830205.0A patent/EP2499792B1/en active Active
-
2015
- 2015-08-06 JP JP2015156368A patent/JP6177843B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
KR101777347B1 (ko) | 2017-09-11 |
WO2011059273A3 (en) | 2011-10-20 |
CN102714624B (zh) | 2017-06-16 |
CN102714624A (zh) | 2012-10-03 |
JP2013511196A (ja) | 2013-03-28 |
WO2011059273A2 (en) | 2011-05-19 |
JP2016007026A (ja) | 2016-01-14 |
JP6177843B2 (ja) | 2017-08-09 |
US10425666B2 (en) | 2019-09-24 |
KR20110053177A (ko) | 2011-05-19 |
EP2499792A2 (en) | 2012-09-19 |
EP2499792A4 (en) | 2014-03-12 |
EP2499792B1 (en) | 2016-11-02 |
US20110119395A1 (en) | 2011-05-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6177843B2 (ja) | 部分化を利用した適応的なストリーミング方法及びその装置 | |
JP5794998B2 (ja) | 適応的なストリーミング方法及びその装置 | |
US9756364B2 (en) | Streaming method and apparatus operating by inserting other content into main content | |
JP6081541B2 (ja) | データ伝送方法及び装置 | |
KR101837687B1 (ko) | 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치 | |
JP6124960B2 (ja) | データ提供方法及びその装置、並びにデータ受信方法及びその装置 | |
JP6177839B2 (ja) | データ伝送方法及び装置、並びにデータ受信方法及び装置 | |
US9197689B2 (en) | Method and apparatus for adaptively streaming content including plurality of chapters | |
US20120272281A1 (en) | Method and apparatus for transmitting media data, and method and apparatus for receving media data | |
JP6131050B6 (ja) | データ伝送方法及び装置、並びにデータ受信方法及び装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20131001 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140526 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140701 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141001 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20141226 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20150406 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150806 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20150825 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20151030 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161212 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170322 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6116906 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |