JP2022522575A - カプセル化されたメディアコンテンツの利用可能な部分をシグナリングするための方法、装置、及びコンピュータプログラム - Google Patents

カプセル化されたメディアコンテンツの利用可能な部分をシグナリングするための方法、装置、及びコンピュータプログラム Download PDF

Info

Publication number
JP2022522575A
JP2022522575A JP2021531284A JP2021531284A JP2022522575A JP 2022522575 A JP2022522575 A JP 2022522575A JP 2021531284 A JP2021531284 A JP 2021531284A JP 2021531284 A JP2021531284 A JP 2021531284A JP 2022522575 A JP2022522575 A JP 2022522575A
Authority
JP
Japan
Prior art keywords
media
preselection
data
initialization
client
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021531284A
Other languages
English (en)
Other versions
JP7241874B2 (ja
Inventor
フランク ドゥヌアル，
フレデリック マゼ，
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of JP2022522575A publication Critical patent/JP2022522575A/ja
Application granted granted Critical
Publication of JP7241874B2 publication Critical patent/JP7241874B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • H04N21/2358—Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages for generating different versions, e.g. for different recipient devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H04N21/4358—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen for generating different versions, e.g. for different peripheral devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format

Abstract

実施形態によれば、本発明はサーバによってメディアコンテンツを提供する方法を提供し、メディアコンテンツはメディアコンポーネントを含み、それぞれのメディアコンポーネントは初期化データ及びメディアデータを含み、方法は、サーバによって実行され、複数のメディアコンポーネントの事前選択について、複数のメディアコンポーネントのどの初期化データが事前選択のメディアコンポーネントのメディアデータを処理するためにクライアントによって使用されるべきかの指示を取得することと、メディアプレゼンテーション記述における事前選択を記述することとを含み、事前選択の記述は複数のメディアコンポーネントのそれぞれのメディアコンポーネントへの参照及び得られた指示を含む。

Description

本発明はカプセル化されたメディアコンテンツの利用可能な部分をシグナリングし、カプセル化されたメディアコンテンツの部分の伝送を最適化することができるようにするための方法、装置、及びコンピュータプログラムに関する。
本発明は例えばＭＰＥＧ標準化団体によって定義されたＩＳＯベースメディアファイルフォーマットに従った、メディアコンテンツのカプセル化、解析、及びストリーミングに関するものであり、メディアコンテンツのグループの相互交換、管理、編集、及び提示を容易にし、適応型ｈｔｔｐストリーミングプロトコルを用いてインターネットのようなＩＰネットワーク上でのその配信を改善する柔軟で拡張可能なフォーマットを提供する。
国際標準化機構ベースメディアファイルフォーマット（ＩＳＯ ＢＭＦＦ、ＩＳＯ／ＩＥＣ１４４９６－１２）は、ローカル格納又はネットワークを介した伝送若しくは別のビットストリーム配信メカニズムを介した伝送のための、エンコードされ時間を決められたメディアデータビットストリームを記述する周知の柔軟かつ拡張可能なフォーマットである。このファイルフォーマットはいくつかの拡張を有し、例えば、様々なＮＡＬ（ネットワーク抽象化レイヤ）ユニットベースのビデオエンコーディングフォーマットのためのカプセル化ツールを記述するパート１５、ＩＳＯ／ＩＥＣ１４４９６－１５を有する。このようなエンコーディングフォーマットの例は、ＡＶＣ（Advanced Video Coding）、ＳＶＣ（Scalable Video Coding）、ＨＥＶＣ（High Efficiency Video Coding）、又はＬ－ＨＥＶＣ（Layered HEVC）である。このファイルフォーマットはオブジェクト指向である。これは、逐次的又は階層的に編成され、タイミング及び構造パラメータのような、エンコードされ時間を決められたメディアデータビットストリームの記述パラメータを定義する、ボックスと呼ばれるビルディングブロック（又はデータ構造であり、それぞれが４文字コードによって識別される）から構成される。ファイルフォーマットでは、時間にわたるプレゼンテーションの全体はムービーと呼ばれる。ムービーは、メディア又はプレゼンテーションファイルの最上位階層にあるムービーボックス（４文字コード「ｍｏｏｖ」）で記述される。このムービーボックスは、プレゼンテーションを記述する様々なボックスのセットを含む初期化情報コンテナを表す。これはトラックボックス（４文字コード「ｔｒａｋ」）で表されるトラックへと論理的に分割されるかもしれない。各トラック（トラック識別子（ｔｒａｃｋ＿ＩＤ）によって一意に識別される）は、プレゼンテーション（例えばビデオのフレーム）に関する、メディアデータの時間を決められたシーケンスを表す。各トラック内で、時間を決められたデータの単位はサンプルと呼ばれる。これは、ビデオ、オーディオ、又は時間を決められたメタデータのフレームであってもよい。サンプルは、暗黙のうちに順番に番号付けされる。実際のサンプルデータは、ムービーボックスと同じ階層にあるメディアデータボックス（Ｍｅｄｉａ Ｄａｔａ Ｂｏｘ、４文字コード「ｍｄａｔ」）と呼ばれるボックスにある。ムービーはまた、フラグメント化されてもよく、すなわち、全体のプレゼンテーションについての情報を含み、それにムービーフラグメントのリストが続くムービーボックスと、メディアデータボックスとのペアとして、時間的に編成されてもよい。ムービーフラグメント（４文字コード「ｍｏｏｆ」のボックス）内には、ムービーフラグメントごとに０個以上のトラックフラグメントのセット（４文字コード「ｔｒａｆ」のボックス）がある。トラックフラグメントは次に、０個以上のトラックランボックス（「ｔｒｕｎ」）を含み、各トラックランボックスは、そのトラックフラグメントについてのサンプルの連続したランを文書化する。
ＩＳＯＢＭＦＦでカプセル化されたメディアデータは、ＨＴＴＰでの適応ストリーミングに使用することができる。例えば、ＭＰＥＧ ＤＡＳＨ（「Dynamic adaptive streaming over HTTP」の場合）及びスムースストリーミングは、メディアファイルのセグメント又はフラグメントベースの配信を可能にするＨＴＴＰ適応ストリーミングプロトコルである。ＭＰＥＧ ＤＡＳＨ規格（「ＩＳＯ／ＩＥＣ２３００９－１、Dynamic Adaptive Streaming over HTTP（ＤＡＳＨ）、Ｐａｒｔ １：Media presentation description and segment formats」参照）はメディアプレゼンテーションのコンテンツのコンパクトな記述とＨＴＴＰアドレス（例えばＵＲＬ）との間のリンクを確立することを可能にする。通常、この関連付けは、マニフェストファイル又は記述ファイルと呼ばれるファイルで記述される。ＤＡＳＨのコンテクストでは、このマニフェストファイルはＭＰＤファイル（メディアプレゼンテーション記述として）とも呼ばれるファイルである。クライアント装置がＭＰＤファイルを取得すると、メディアコンテンツのエンコードされた配信可能な各バージョンの記述をクライアントが容易に判別できる。マニフェストファイルを読み取る又は解析することにより、クライアントはメディアプレゼンテーションで提案されたメディアコンテンツコンポーネントの種類を知り、関連するメディアコンテンツコンポーネントをダウンロードするためのＨＴＴＰアドレスを知る。したがって、どのメディアコンテンツコンポーネントを（例えばＨＴＴＰリクエスト経由で）ダウンロードし、及び再生する（メディアデータセグメントの受信後にデコードして再生する）のかを決定することができる。ＤＡＳＨは、いくつかのタイプのセグメント、主に初期化セグメント、メディアセグメント、又はインデックスセグメントを定義する。初期化セグメントは、設定情報及びメディアコンテンツを記述するメタデータを含み、典型的にはＩＳＯＢＭＦＦメディアファイルの「ｆｔｙｐ」ボックス及び「ｍｏｏｖ」ボックスを少なくとも含む。メディアセグメントは、メディアデータを含む。これは、例えばＩＳＯＢＭＦＦファイルの１つ以上の「ｍｏｏｆ」及び「ｍｄａｔ」ボックスであってもよく、又はＩＳＯＢＭＦＦファイルの「ｍｄａｔ」ボックスのバイト範囲であってもよい。メディアセグメントは、サブセグメントにさらに分割することができる（これはまた、１つ以上の完全な「ｍｏｏｆ及び「ｍｄａｔ」ボックスにも対応する）。ＤＡＳＨマニフェストはストリーミングクライアントがＨＴＴＰ要求を介してこれらのセグメントを扱うために、セグメントＵＲＬ又はセグメントに対するバイト範囲を備えるファイルに対するベースＵＲＬを提供する場合がある。
図１は、サーバからクライアントにメディアデータをストリーミングする例を示している。
図示されているように、サーバ１００はカプセル化モジュール１０５を備え、このカプセル化モジュール１０５はネットワークインターフェース（図示せず）を介して通信ネットワーク１１０に接続されており、この通信ネットワーク１１０にはまたネットワークインターフェース（図示せず）を介してクライアント１２０のカプセル化解除モジュール１１５が接続されている。
サーバ１００はストリーミング又は格納のために、データ、例えば、ビデオ及び／又はオーディオデータを処理する。その目的で、サーバ１００は、例えば画像１２５のオリジナルのシーケンスを含む、データを取得又は受信し、表されていないメディアエンコーダ（例えば、ビデオエンコーダ）を使用して、画像のシーケンスをメディアデータ（すなわち、ビットストリーム）にエンコードし、カプセル化モジュール１０５を使用して、メディアデータを１つ以上のメディアファイル又はメディアセグメント１３０にカプセル化する。カプセル化モジュール１０５は、メディアデータをカプセル化するためのライタ又はパッケージャのうちの少なくとも１つを備える。メディアエンコーダは、受信データをエンコードするためにカプセル化モジュール１０５内に実装されてもよく、又はカプセル化モジュール１０５とは別個であってもよい。
クライアント１２０は、例えばメディアファイル１３０を処理するために、通信ネットワーク１１０から受信したデータを処理するために使用される。受信されたデータがカプセル化解除モジュール１１５（パーサとも呼ばれる）でカプセル化解除された後、メディアデータビットストリームに対応するカプセル化解除されたデータ（又は解析されたデータ）はデコードされ、例えば格納、表示又は出力され得るオーディオ及び／又はビデオデータを形成する。メディアデコーダは、カプセル化解除モジュール１１５内に実装されてもよく、又はカプセル化解除モジュール１１５とは別個であってもよい。メディアデコーダは、１つ以上のビデオビットストリームを並列にデコードするように構成してもよい。
メディアファイル１３０は、異なる方法でカプセル化解除モジュール１１５に通信されてもよいことに留意されたい。特に、クライアント１２０から要求を受信すると、カプセル化モジュール１０５はメディア記述（例えばＤＡＳＨ ＭＰＤ）を有するメディアファイル１３０を生成し、それをカプセル化解除モジュール１１５に直接通信（又はストリーミング）することができる。
説明の目的で、メディアファイル１３０はメディアデータ（例えば、エンコードされたオーディオ又はビデオ）を、ＩＳＯベースメディアファイルフォーマット（ＩＳＯＢＭＦＦ、ＩＳＯ／ＩＥＣ１４４９６－１２及びＩＳＯ／ＩＥＣ１４４９６－１５規格）に従うボックスへとカプセル化することができる。
図２は、クライアントによって選択されたレプレゼンテーション（Ｒｅｐｒｅｓｅｎｔａｔｉｏｎ）についてのＤＡＳＨセグメントのストリーミングの例を示す。
ＤＡＳＨによれば、また図示されているように、クライアントがストリーミングのためにレプレゼンテーションを選択する際に（例えば、図１のクライアント１２０）、初期化セグメント、例えば、イニシャライゼーションセグメント２０５を要求する。説明のために、メディアデータがＩＳＯベースメディアファイルフォーマット（ＩＳＯ／ＩＥＣ１４４９６－１２）に従ってカプセル化される場合、イニシャライゼーションセグメントは、「ｍｏｏｖ」ボックス及びそのサブボックスからなる。
イニシャライゼーションセグメントに含まれる情報項目を受信すると、クライアントは、そのメディアデコーダをセットアップする（これは図１を参照して記述したカプセル化解除モジュール１１５の一部であってもよい）。セットアップが完了すると、クライアントは、選択されたレプレゼンテーションに対応するデータセグメント、例えばメディアセグメント（ＭｅｄｉａＳｅｇｍｅｎｔ）２１０－１及び２１０－２、を要求し、これらはセグメントベースでサーバによってストリーミングされる。例２００によれば、メディアセグメントは、「Ｄｅｌｔａ＿ｔ」に等しい時間長を有する。メディアが１つのセグメント（例えば、２１０－１）から別のセグメント（例えば、２１０－２）へスムーズに再生されるように、適切な時刻に要求を発行することはクライアント次第である。
定義により、イニシャライゼーションセグメント２０５の連結２００、及びそれに続くメディアセグメント２０１－１及び２１０－２のような１つ以上のメディアセグメントは、適合する（又は対応する）ビットストリームをもたらす。
メディアデータを要求し送信するためのこれらのファイルフォーマット及びこれらの方法が効率的であることが証明されている一方で、クライアントに送信されるべきデータの選択を改善し、要求される帯域幅を減らし、クライアントによるデータのカプセル化解除及びデコードを容易にするために、送信されるデータのシグナリングを改善することが絶えず必要とされている。
本発明は、前述の懸念の１つ以上に対処するために考案された。
本発明の第１の態様によれば、サーバによってメディアコンテンツを提供する方法が提供され、メディアコンテンツはメディアコンポーネントを含み、それぞれのメディアコンポーネントは初期化データ及びメディアデータを含み、方法は、サーバによって実行され、
複数のメディアコンポーネントの事前選択について、複数のメディアコンポーネントのどの初期化データが事前選択のメディアコンポーネントのメディアデータを処理するためにクライアントによって使用されるべきかの指示を取得することと、
メディアプレゼンテーション記述における事前選択を記述することと、を含み、事前選択の記述は、複数のメディアコンポーネントのそれぞれのメディアコンポーネントへの参照と、取得した指示とを含む。
したがって、本発明の方法は、サーバからクライアントに送信されるデータをクライアントの視点で適切に選択することができ、一方、クライアントによるデータのカプセル化解除及びデコードを容易にすることができる。さらに、本発明の方法は、ストリーミングクライアントとの相互運用性及びストリーミングクライアント間の一貫した体験を保証することを可能にする。メディアパッケージャはストリーミングマニフェストにおいて宣言された事前選択について、メディアコンポーネントのセット全体が単一の初期化セグメントにつながるか、又は初期化セグメントのセット、例えばメディアコンポーネントごとに１つ、につながるかをシグナリングする。この追加のシグナリングはＤＡＳＨ ＭＰＤにおいて使用可能であり、ストリーミングクライアントがそのデコーダを適切にセットアップできるようにするために何を最初にフェッチするのかを知ることを可能にする。
実施形態によれば、取得された指示は、複数のメディアコンポーネントのうちの単一のメディアコンポーネントに属する初期化データが事前選択のメディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする。
実施形態によれば、初期化データが使用されるべきである単一のメディアコンポーネントへの参照が予め決定されている。
実施形態によれば、取得された指示は、事前選択によって参照されるメディアコンポーネントのメディアデータが、事前選択によって参照される他のメディアコンポーネントの他のメディアデータとは独立して処理されることができないことをさらにシグナリングする。
実施形態によれば、取得された指示は、複数のメディアコンポーネントのうちのいくつかのメディアコンポーネントからの初期化データが、事前選択のメディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする。
実施形態によれば、この方法は、クライアントへの流布のためにストリーミングサーバ上でメディアプレゼンテーション記述を公開することをさらに含む。
本発明の第２の態様によれば、クライアントによってメディアコンテンツを処理する方法が提供され、メディアコンテンツはメディアコンポーネントを含み、それぞれのメディアコンポーネントは初期化データ及びメディアデータを含み、この方法は、クライアントによって実行され、
メディアプレゼンテーション記述を取得することであって、メディアプレゼンテーション記述は複数のメディアコンポーネントの事前選択の記述を含み、事前選択の記述は、複数のメディアコンポーネントのうちのメディアコンポーネントへの参照と、事前選択のメディアコンポーネントのメディアデータを処理するために、複数のメディアコンポーネントのどの初期化データがクライアントによって使用されるべきかの指示とを含む、取得することと、
複数のメディアコンポーネントのどの初期化データが使用されるべきかの指示を取得するために取得されたメディアプレゼンテーション記述を解析することと、を含む。
本発明の第２の態様は、上記の第１の態様と同様の利点を有する。
実施形態によれば、この方法は、使用されるべき複数のメディアコンポーネントの初期化データを要求することと、使用されるべき複数のメディアコンポーネントの初期化データの関数としてクライアントの少なくとも１つのデコーダを初期化することと、をさらに含む。
実施形態によれば、取得された指示は、複数のメディアコンポーネントのうちの単一のメディアコンポーネントに属する初期化データが、事前選択のメディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする。
実施形態によれば、初期化データが使用されるべき単一のメディアコンポーネントは、複数のメディアコンポーネントのメディアコンポーネントに対応する適応セットのうちの主適応セットの表現に関連付けられる。
実施形態によれば、取得された指示は、事前選択によって参照されるメディアコンポーネントのメディアデータが、事前選択によって参照される他のメディアコンポーネントの他のメディアデータと独立して処理することができないことをさらにシグナリングする。
実施形態によれば、取得された指示は、複数のメディアコンポーネントのうちのいくつかのメディアコンポーネントからの初期化データが、事前選択のメディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする。
実施形態によれば、メディアコンテンツはパーティション化されたメディアデータに対応する。
実施形態によれば、メディアプレゼンテーション記述はＭＰＥＧ ＤＡＳＨ規格に適合する。
実施形態によれば、各メディアコンポーネントは適応セットに属する表現に関連付けられ、複数のメディアコンポーネントのうちの各メディアコンポーネントは、複数のメディアコンポーネントの他のメディアコンポーネントに関連付けられている表現を備える適応セットとは異なる適応セットに属する表現に、関連付けられる。
本発明の第３の態様によれば、カプセル化されたメディアデータを提供又は処理するための装置が提供され、この装置は、上述の方法のステップのそれぞれを実行するように構成された処理部を備える。
本発明の第３の態様は、上記第１の態様と同様の利点を有する。
本発明の第４の態様によれば、メディアコンテンツのための情報データセットを搬送する信号が提供され、情報データセットはメディアプレゼンテーション記述を含み、メディアコンテンツはメディアコンポーネントを含み、各メディアコンポーネントは初期化データ及びメディアデータを含み、メディアプレゼンテーション記述はメディアコンテンツの複数のメディアコンポーネントの事前選択の記述と、事前選択のメディアコンポーネントのメディアデータを処理するために複数のメディアコンポーネントのどの初期化データがクライアントによって使用されるべきかの指示と、を少なくとも含む。
本発明の第４の態様は、上記第１の態様と同様の利点を有する。
本発明の第５の態様によれば、メディアコンテンツのための情報データセットを搬送する信号を格納するメディア格納装置が提供され、情報データセットはメディアプレゼンテーション記述を含み、メディアコンテンツはメディアコンポーネントを含み、各メディアコンポーネントは初期化データ及びメディアデータを含み、メディアプレゼンテーション記述は、メディアコンテンツの複数のメディアコンポーネントの事前選択の記述と、事前選択のメディアコンポーネントのメディアデータを処理するために複数のメディアコンポーネントのうちのどの初期化データがクライアントによって使用されるべきかの指示と、を少なくとも含む。
本発明の第５の態様は、上記第１の態様と同様の利点を有する。
本発明の実施形態に係る方法の少なくとも一部は、コンピュータによって実装されてもよい。したがって、本発明は、完全にハードウェアの実施形態、全体的にソフトウェアの実施形態（ファームウェア、常駐ソフトウェア、マイクロコードなどを含む）、又はソフトウェア及びハードウェアの態様を組み合わせた実施形態の形態をとることができ、これらはすべて本明細書において一般に「回路」、「モジュール」、又は「システム」と呼ばれることがある。さらに、本発明は、媒体に実装されたコンピュータ使用可能プログラムコードを有する、任意の有形の表現媒体に実装されたコンピュータプログラム製品の形態をとることができる。
本発明をソフトウェアで実装することができるため、本発明は、プログラム可能機器に提供するための、任意の適したキャリア媒体上のコンピュータ可読コードとして実装することができる。有形キャリア媒体は、フロッピーディスク、ＣＤ－ＲＯＭ、ハードディスクドライブ、磁気テープ装置又はソリッドステートメモリ装置などの記憶媒体を含むことができる。一時的搬送媒体は、電気信号、電子信号、光信号、音響信号、磁気信号、又は例えばマイクロ波又はＲＦ信号のような電磁信号を含むことができる。
本発明の実施形態は、単なる例示として、以下の図面を参照して記述される。
サーバからクライアントにメディアデータをストリーミングする例を示す。 図２は、データストリーミングの例である。 ＭＰＥＧ ＤＡＳＨ規格に従うＤＡＳＨにおけるメディア表現の典型的な記述をしめす。 特に３つの適応セット及び１つの事前選択を記述する、メディアプレゼンテーション記述の一部の例を示す。 、 、 本発明の実施形態に従う、特に３つの適応セット及び１つの事前選択を記述し、使用される初期化セグメントのシグナリングを記述する、メディアプレゼンテーション記述の一部の例を示す。 本発明の実施形態に従う、メディアサーバが複数のコンポーネントを有するメディアデータをパッケージ化しストリーミングを準備するための方法のステップの例を示す。 、 特に使用する初期化セグメントのシグナリングのために、プリセレクション内で宣言されたプリセレクション及びアダプテーションセットに関するストリーミングクライアントの期待される挙動を記述するために、サーバによって実行されるステップの例を示す。 本発明の実施形態に従う、ストリーミングマニフェストを受信した際にクライアントがメディアデータを処理するためのステップの例を示す。 、 本発明の実施形態に従う、事前選択の記述をクライアントが解釈するためのステップの例を示す。 本発明の少なくとも１つの実施形態を実装するように構成された処理装置を概略的に示す。
本発明者らは、メディアコンポーネントの事前選択を使用することができるオーディオブロードキャストにおいて高度なユースケースが存在すること、及び、例えばビューポート依存ストリーミング又はタイルベースストリーミングのように、メディアコンポーネントの事前選択が有益でありえる適応ビデオストリーミングおいてもユースケースが存在し得ることに注目した。
このような場合、クライアントに送信されるデータを選択し、及び／又は送信されるデータをシグナリングすることについての具体的な必要性がある。これは特に、複数のストリーム又は複数の部分としてのメディアコンテンツのストリーミングを考える場合に当てはまる。このようなコンテンツの例は、いくつかのオーディオストリーム（音楽、異なる言語のダイアログ、サウンドエフェクトなど）がオーディオシーンを表現するために使用されてもよいマルチストリームオーディオである。オーディオシーンの一部を表す各オーディオストリームは、ＭＰＤの中の１つのアダプテーションセット（ＡｄａｐｔａｔｉｏｎＳｅｔ）として記述することができる。次いで、各部分は、メディアプレゼンテーションのメディアコンポーネントと考えられてもよい。別の例は、ビデオの場合、タイル化されたビデオ、又はビデオの空間的部分若しくは矩形領域であり、これは、全方向又は広角のビデオストリーミングのために使用することができる。各空間的部分、タイル、又は領域は、ＭＰＤにおいて１つのアダプテーションセットとして記述され、ビデオシーンの１つのメディアコンポーネントとして考慮され得る。使用の一例は、ＯＭＡＦ（ＩＳＯ／ＩＥＣ２３０９０－２）におけるビューポート依存ストリーミング、又はより一般にはタイルベースストリーミングである。
実施形態によれば、ＨＴＴＰを介した適応ストリーミングのために、パーティション化されたビデオ、特にタイル化されたビデオを利用することができ、クライアントに対してメディアコンポーネントの事前選択、例えば、クライアントのニーズ及びクライアントの文脈を考慮した、ビデオを取得及びレンダリングするためのビデオの空間的部分（又はタイル）の事前選択、を選択する可能性を与える。これは、クライアントにメディアコンポーネントの事前選択を選択する可能性を与え、選択された事前選択に対応するカプセル化されたデータを適切にシグナリングすることによって得られる。
説明の目的で、本明細書で記述される多くの実施形態は、ＨＥＶＣ規格又はその拡張に基づいている。しかしながら、本発明の実施形態は、ＡＶＣのような既に利用可能な、又は規格策定中のＭＰＥＧバーサタイルビデオコーディング（ＶＶＣ）のような、まだ利用可能でない又は開発されていない他の符号化規格にも適用される。特定の実施形態では、ビデオエンコーダはタイルをサポートし、独立してデコード可能なタイル、タイルセット又はタイルグループ（ときにモーションコンストレインドタイルセットとも呼ばれる）を生成するようにエンコーディングを制御することができる。
例えばＭＰＤのようなマニフェストは、所与のメディアプレゼンテーションのためにアクセスできるすべてのメディアコンテンツコンポーネントを記述する文書、典型的にはＸＭＬファイルである（又はＨＴＴＰライブストリーミングの場合はプレーンテキストファイルですらある）ことが思い出される。ＤＡＳＨクライアントは、ストリーミングサーバとの通信により、メディアコンポーネントの選択のためにＭＰＤで提供されるメタデータを使用してもよい。このような記述はメディアコンテンツコンポーネントのタイプ（例えば、オーディオ、オーディオチャンネル、ビデオ、オーディオ－ビデオ、ビデオの一部、メタデータ、又はテキスト）、メディアセグメントの時間長、及びメディアセグメントに関連するアドレス（例えばＵＲＬ）、すなわちメディアコンテンツコンポーネントを取得することができるアドレス、を含むことができる。メディアコンテンツコンポーネントは同じコンテンツの代替バージョンとして、又は同じコンテンツの一部（例えば、空間関係記述子（ＳＲＤ）を有するビデオの空間的部分、関心領域、若しくはタイル、又は仮想現実若しくは全方向メディアコンテンツのビューポート）として、又は一緒に提示又は表示されるように意図されたコンテンツコンポーネントを記述する「メディア体験」の一部として記述することができる。
典型的には、ＭＰＤは図３に示すような階層データモデルに基づく。
図３は、ＭＰＥＧ ＤＡＳＨ規格に従うＤＡＳＨにおけるメディアプレゼンテーションの典型的な説明を示す。
図示されているように、これは主に、３００で示される１つ又はいくつかの期間からなり、これらの期間はそれぞれ、ピリオド要素によって記述され、各ピリオド要素は開始時刻及び時間長を有する。次に、各ピリオド要素は主に、３０１で示される１つ又はいくつかのアダプテーションセット要素からなる。
アダプテーションセット要素は符号３０２で示されるように、１つ以上のメディアコンテンツコンポーネント及びその種々のエンコードされた代替物に関する情報を提供する。同じメディアコンテンツコンポーネントの各エンコードされた代替物は、典型的には３０３で示される１つ又はいくつかのメディア及び／又は初期化セグメントからなるレプレゼンテーションと呼ばれる。
上述したように、ユーザの必要性及び状況（例えば、帯域幅及び処理リソースの観点から）に応じてユーザが選択することができるメディアコンポーネントのセットを作成することは有益である。メディアコンポーネントのセットはいくつかのメディアコンポーネントを含み、メディアコンポーネントは例えば、特定の適応セットの特定の表現に関連するセグメントであり、これは例えばアダプテーションセット１のレプレゼンテーション１に対応する図３に３０３で示されるセグメントである。
図４は、特に３つの適応セット及び１つの事前選択を記述するメディアプレゼンテーション記述の一部の例を示す。事前選択は一緒に消費されることが期待されるメディアコンポーネントのサブセットであり、典型的には、バンドル内のアダプテーションセットの組み合わせである。バンドルは、単一のデコーダインスタンスによって一緒に消費され得るメディアコンポーネントのセットである。ＭＰＤには複数のプリセレクションが存在し得る。そのような場合、クライアントはいくつかのプリセレクション属性又は記述子（例えば、役割、格付けなど）に従って、どの１つがその必要性又は能力によりよく適合するかを決定する。
メディアプレゼンテーション記述（図４に４００で示される）のそれぞれの適応セット（図４に４０５－１から４０５－３で示される）は図３を参照して記述されるように、１つ以上の代替表現を含むことができ、各表現は、少なくとも１つの初期化セグメント及び１つ以上のメディアセグメント（その各々が与えられたＵＲＬを介してアクセス可能である）を有するセグメントのリストとして記述される。
図示されているように、メディアプレゼンテーション記述４００は、図示されている例では３つのアダプテーションセットを含む事前選択の宣言（図４のプリセレクション４１０）をさらに含む。
説明の目的で、アダプテーションセット４０５－１が、（ｐｒｅｓｅｌｅｃｔｉｏｎＣｏｍｐｏｎｅｎｔｓ属性を使用して）プリセレクションのメディアコンポーネントのリストで最初に宣言されたものであるために、プリセレクションの主アダプテーションセットであると仮定する。アダプテーションセット４０５－２及び４０５－３は、（主アダプテーションセットとは違い）部分アダプテーションセットである。
図４に示されたマニフェストの一部から、クライアントがデコーダによって期待される正しいセグメント連結を決定することができないことがあることが観察される。特に、クライアントはプリセレクションを再生するときに、どの初期化セグメントをダウンロードして使用すべきかを決定することができない（すなわち、クライアントはアダプテーションセット４０５－１から４０５－３の各初期化セグメントの連結を必要とするのか？あるいは、主適応セット、すなわちアダプテーションセット４０５－１からのからの初期化セグメントのみを必要とするのか？）。さらに、クライアントは、識別子ｉｄ＝１を有する適応セット、識別子ｉｄ＝２を有する適応セット、又は識別子ｉｄ＝３を有する適応セットのみを、単独で再生されるメディアストリームとして選択することも可能であることに留意されたい。そして、１つ以上のメディアセグメントに続く初期化セグメントの通常の連結は、同様に適合したビットストリームを導くだろう。
図５は、本発明の実施形態に従う、特に３つの適応セットと１つの事前選択とを記述し、使用される初期化セグメントのシグナライゼーションを記述する、メディアプレゼンテーション記述の一部の第１の例を示す。
図示されているように、メディアプレゼンテーション記述５００は、図４を参照して記述された３つのアダプテーションセット４０５－１～４０５－３に類似する、５０５－１～５０５－３で示される３つの適応セットを含む。
メディアプレゼンテーション記述５００は、図４のプリセレクション４１０に比べて拡張された、５１０で示されるプリセレクションをさらに含み、新しい属性は例えば「ｉｎｉｔ」と呼ばれ、５１５で示される。
この属性は、プリセレクションの初期化モードを記述することを目的としている。
図示された例によれば、この属性の値は「ｐｒｅｓｅｌｅｃｔ＿ｏｎｌｙ」を示し、プリセレクション５１０についてのセグメントの正しい連結はメディアプレゼンテーション記述５００の下に示されるものであることを意味する。この例では１つの初期化セグメントのみ、例えば、主アダプテーションセット５０５－１の１つのレプレゼンテーションからの初期化セグメントのみが、全体の事前選択に関連する。これは、主アダプテーションセットがタイルベーストラック又はエクストラクタトラックに対応し、部分適応セットがタイルトラック（例えば、ビデオがＨＥＶＣでエンコードされる場合の「ｈｖｔ１」タイルトラック、又は各タイルが独立したＨＥＶＣビットストリームでエンコードされる場合の「ｈｖｃ１」トラック）に対応する場合に当てはまる。
メディアプレゼンテーション記述５００の下に示される連結は、適合するビットストリームをもたらすだろう（例えば、ＩＳＯＢＭＦＦにカプセル化される場合、連結されたセグメントは、ＩＳＯＢＭＦＦパーサによって読み取られることができる）。これは、５２０で示される初期化セグメント、例えば主適応セットの初期化セグメント（すなわち、与えられた例ではアダプテーションセット５０５－１の初期化セグメント）と、５２５－１から５２５－３で示される対応するＵＲＬで定義される、事前選択に属する適応セットからのメディアセグメント（すなわち、与えられた例ではアダプテーションセット５０５－１から５０５－３のメディアセグメント）とを含む。メディアセグメントのＵＲＬは、＄ｔｉｍｅ＄パラメータを使用したテンプレートＵＲＬであることに注意する。もちろん、＄Ｎｕｍｂｅｒ＄を使用するテンプレートであってもよい。それらは、本発明を変更することなく、セグメントテンプレートの代わりにセグメントリストとして宣言されることもできる。
図示された例によれば、部分アダプテーションセット５０５－２及び５０５－３はそれ自体で、又はプリセレクション内でのみ、選択可能かつ再生可能であってもよい。前者の場合、部分アダプテーションセット内の所与のレプレゼンテーションについて、そのイニシャライゼーションセグメントの後に１つ以上の対応するメディアセグメントが続くような連結が、適合するビットストリームをもたらすだろうことを意味する。
「ｐｒｅｓｅｌｅｃｔ＿ｏｎｌｙ」が識別子ｉｄ＝１を有する適応セット、識別子ｉｄ＝２を有する適応セット、又は識別子ｉｄ＝３を有する適応セットの単独での選択を禁止するように定義されてもよいことに留意されたい。このような定義は、これらの適応セットのそれぞれについて独立した、初期化セグメントの後に１つ以上のメディアセグメントが続くような連結が、適合するビットストリームをもたらさないかもしれないことを意味する。各アダプテーションセットは（例えば、ＯＭＡＦのSubPicCompositionId:@noSingleSelection = trueを使用して）事前選択の外側で、又は単独で、選択可能でない（例えば隠されている）又は再生可能でないことを示すために、追加の又は専用のシグナリングを有することができる。
図６は、本発明の実施形態に従う、特に３つの適応セットと１つの事前選択とを記述し、使用される初期化セグメントのシグナライゼーションを記述する、メディアプレゼンテーション記述の一部の第２の例を示す。
図示されているように、メディアプレゼンテーション記述６００は、図４及び図５を参照してそれぞれ記述されている３つのアダプテーションセット４０５－１～４０５－３及び５０５－１～５０５－３に類似する、６０５－１～６０５－３で示される３つの適応セットを含む。
メディアプレゼンテーション記述５００と同様に、メディアプレゼンテーション記述６００は、図６において６１５で示される同じ新しい属性「ｉｎｉｔ」を含む、６１０で示される事前選択をさらに含む。この新しい属性は、やはり、プリセレクションについての初期化モードを記述することを目的とする。
プリセレクション６１０についてのセグメントの連結は、メディアプレゼンテーション記述６００の下に示されている。
図示された例によれば、この属性の値は「ＡＳ＿ｏｎｌｙ」を示し、これは、各アダプテーションセットがプリセレクション６１０で又は独立して使用されてよいことを意味する（サーバがセグメントを、それらのアダプテーションセットレベルでの連結が適合するビットストリームをもたらすように構築したため）。
この例は例えば、デジタルビデオブロードキャスティング（ＤＶＢ）規格に記述されているように、複数のオーディオストリームを伴ういくつかのオーディオユースケースに対応することができる。そのような場合、アダプテーションセット６０５－１～６０５－３の各々は、各々がオーディオストリームを記述する１つ以上のレプレゼンテーションを含む。各レプレゼンテーションは、イニシャライゼーションセグメント及び１つ以上のメディアセグメントを宣言する。
図６に図示された例によれば、セグメントは、（メディアプレゼンテーション記述６００の下に示すように）レプレゼンテーション又はアダプテーションセットごとに連結される。このことは、プリセレクションにおけるそれぞれのアダプテーションセットが自身のイニシャライゼーションセグメントを有することを意味する。例えば、アダプテーションセット６０５－１の初期化セグメントは対応するＵＲＬ６２５－１で定義されているアダプテーションセット６０５－１のメディアセグメントと連結され、アダプテーションセット６０５－３の初期化セグメントは対応するＵＲＬ６２５－３で定義されているアダプテーションセット６０５－３のメディアセグメントと連結される（これはアダプテーションセット６０５－２及びプリセレクションで宣言されている任意のアダプテーションセットについて同じである）。次いで、これらのストリームは、これらの個々のストリームをマルチストリーム（例えば、ＩＳＯ／ＩＥＣ２３００８－３におけるようなオーディオストリームのためのＭＰＥＧ－Ｈ ３Ｄオーディオストリーム）へと統合するエンコーダインターフェースに提供されてもよい。
符号６２０で表されるアダプテーションセットベースの連結は、それぞれ適合するビットストリームをもたらすだろう。初期化モード属性が「ＡＳ＿ｏｎｌｙ」に設定されている事前選択によって、各アダプテーションセットが単独でプリセレクションの外側で選択及び再生されることが防止されるわけではない。
図７は、本発明の実施形態に従う、特に３つの適応セットと１つの事前選択とを記述し、使用される初期化セグメントのシグナライゼーションを記述する、メディアプレゼンテーション記述の一部の第３の例を示す。
図示されているように、メディアプレゼンテーション記述７００は、図４、図５、及び図６を参照して記述されたものと同様の、７０５－１～７０５－３で示される３つの適応セットを含む。
メディアプレゼンテーション記述５００及び６００と同様に、メディアプレゼンテーション記述７００は、図７において７１５で示される同じ新しい属性「ｉｎｉｔ」を含む、７１０で示される事前選択をさらに含む。この新しい属性は、やはり、プリセレクションについての初期化モードを記述することを目的とする。プリセレクション７１０についてのセグメントの可能な連結は、メディアプレゼンテーション記述７００の下に示されている。
図示された例によれば、この属性の値は、連結７５０又は７６１から７６３がすべて適合するビットストリームを導くことを意味する、「ｐｒｅｓｅｌｅｃｔ＿ｏｒ＿ＡＳ」を示す。連結７５０はプリセレクション内のメディアコンポーネント又はメディア部分のストリーミングに対応する（すなわち、主アダプテーションセットからの１つの単一のイニシャライゼーションセグメントの後に、プリセレクションのアダプテーションセットからのメディアセグメント７２５－１、７２５－２、７２５－３などの連続する連結が続く）。連結７６１～７６３は、１つのメディアコンポーネントのみの、すなわちプリセレクションの外側でのストリーミングに対応する。一例として、７６１～７６３はそれぞれ、独立したビットストリーム、トラック、又はレプレゼンテーションとしてエンコードされ及び提供される、ビデオストリーム内の１つの関心領域に対応することができる。カプセル化７５０は、オリジナルのビデオストリーム内に一緒に構成されるこれらの注目領域に対応し得る。
図８は、本発明の実施形態に従う、サーバが、複数のメディアコンポーネントを有するメディアデータをパッケージ化し、ストリーミングの準備をするためのステップの一例を示す。
図示されているように、第１のステップ（ステップ８００）は、１つ以上のビットストリームにおけるデータエンコーディング、典型的にはデータ圧縮、を対象とし、これはいくつかのメディアコンポーネント、例えばいくつかのＩＳＯＢＭＦＦトラックへと、カプセル化されたる（ステップ８０５）。カプセル化されたメディアコンポーネント、又はこれらのカプセル化されたメディアコンポーネントのいくつかのサブセットは、異なる組み合わせに従って組み合わせることができる。これらの組み合わせのいくつかは、特に関連するものとして識別され、そして事前選択として提案されてもよい。
クライアントが事前選択（すなわち、メディアコンポーネントの予め決定された組み合わせ）を選択できるようにするために、これらの事前選択は、メディアプレゼンテーション記述においてサーバによって示される（ステップ８１０）。こうすることにより、サーバは、メディアデータ選択のためのストリーミングクライアントのありうる選択を簡素化する。さらに、プリセレクションの定義はコンテンツ作成者の意図をより良く記述し、メディアプレゼンテーションにおいて好ましいエントリポイントを提供する。その目的で、サーバは初期化セグメントについてのルールを定義するために、注釈をメディアプレゼンテーション記述の中に入れる。
図９及び１０は、メディアプレゼンテーション記述にある事前選択のシグナリングの例を提供する。
次に、これらの記述を有するメディアファイル又はセグメントは、クライアントへの流布のためにストリーミングサーバ上に公開される（ステップ８１５）。
図９は、図８のステップ８１０を参照して記述されるように、特に使用する初期化初期化セグメントのシグナリングのために、プリセレクション及びプリセレクション内で宣言されたアダプテーションセットに関してストリーミングクライアントに期待される挙動を記述するために、サーバによって実行されるステップの第１の例を示す。
図示されているように、第１のステップ（ステップ９００）は考慮されるプリセレクションが単一の初期化セグメントと共に使用されるべきか否か、すなわち、使用される初期化セグメントの個数が１以上であるか否かを決定することに向けられている。これはコンテンツに依存する。例えば、タイル化されたビデオについてこのテストは真になるかもしれず、複数のオーディオストリームについてこのテストは偽になるかもしれない。
考慮されたプリセレクションが単一の初期化セグメントと共に使用されるならば、メディアプレゼンテーション記述を書き込む責任を負うサーバモジュールは、一つの初期化セグメントのみが使用されるべきであることを示すためにプリセレクション要素に属性を追加する（ステップ９０５）。デフォルトでは、すなわち単一のイニシャライゼーションセグメントが使用されるプリセレクションにおいて指示が与えられないとき、使用される初期化は主アダプテーションセットからのイニシャライゼーションセグメントである。実施形態によれば、使用される初期化セグメントが主アダプテーションセットからのものでない場合、使用される初期化セグメントがシグナリングされる（ステップ９１０）。例えば、これはプリセレクション要素内の別の属性「ｉｎｉｔＳｅｇｍｅｎｔ」を使用してシグナリングされることが可能である。新しい「ｉｎｉｔＳｅｇｍｅｎｔ」属性は、ｐｒｅｓｅｌｅｃｔｉｏｎＣｏｍｐｏｎｅｎｔｓ属性内で宣言される、アダプテーションセットｉｄのリスト内に存在する１つのアダプテーションセットのｉｄを提供するだろう：
＜Preselection single_init = "true" preselectionComponents="1 2 3 initSegment="2" .../＞
この例では、プリセレクションのメディアコンポーネントのセグメントの連結に使用する単一の初期化セグメントが、ｉｄ＝「２」をもつアダプテーションセットからの初期化セグメントである。
使用される初期化セグメントの誤った記述の例は、以下の通りである：
＜Preselection single_init = "true" preselectionComponents="1 2 3 initSegment="4" .../＞．
このような場合、クライアントはこのプリセレクションを無視する必要がある。ＭＰＤスキーマバリデータは、そのような宣言を受け入れるべきではなく、ＭＰＤを無効と考えるべきである。
変形例では、ｉｎｉｔＳｅｇｍｅｎｔ属性の値が、アダプテーションセットＩＤのｐｒｅｓｅｌｅｃｔｉｏｎＣｏｍｐｏｎｅｎｔｓリスト内のインデックス（１ベースのインデックス）を提供してもよい。例えば、ｐｒｅｓｅｌｅｃｔｉｏｎＣｏｍｐｏｎｅｎｔｓが「１２ ４５ １２３」のプリセレクションでは、ｉｎｉｔＳｅｇｍｅｎｔ＝「２」は、ｉｄ＝「４５」のアダプテーションセットの初期化セグメントを考慮すべきであることを示す。
次に、プリセレクションは、それが含むメディアコンポーネントの一覧と共に記述される（ステップ９１５）。
図１０は、図８のステップ８１０を参照して記述されるように、特に使用する初期化セグメントをシグナリングするために、プリセレクション及びプリセレクション内で宣言されたアダプテーションセットに関するストリーミングクライアントの期待される挙動を記述するために、サーバによって実行されるステップの第２の例を示す。
図示されているように、第１のステップ（ステップ１０００）は、プリセレクションがいくつかの初期化セグメントと共に使用されるべきか否かを決定することに向けられている。これはコンテンツに依存する。この場合も、これは、アプリケーション及びメディアストリームの性質に依存する。
プリセレクションがいくつかの初期化セグメントと共に使用されるならば、特定のｉｎｉｔ＿ｍｏｄｅパラメータの値は、記述されるプリセレクション要素の属性に設定される（ステップ１００５）。この特定のｉｎｉｔ＿ｍｏｄｅパラメータ値は、プリセレクションの各アダプテーションセットの中の各レプレゼンテーションについて、例えば図６を参照して記述されるように（ここで、ｉｎｉｔ＿ｍｏｄｅは「ｉｎｉｔ」属性によって表されている）、対応する初期化セグメントが考慮されることを示す。説明のために、このｉｎｉｔ＿ｍｏｄｅパラメータの値は２に設定されてもよい。反対に、プリセレクションが単一の初期化セグメントと共に使用される場合、サーバは、部分適応セットが事前選択の外側で再生されてもよいかどうかをさらにチェックする（ステップ１０１５）。
部分適応セットが事前選択においてのみ再生されるならば、例えば図５を参照して記述されているように（ここでｉｎｉｔ＿ｍｏｄｅは「ｉｎｉｔ」属性によって表されている）、サーバは特定のｉｎｉｔ＿ｍｏｄｅパラメータの値を、主アダプテーションセットからの（又はシグナリングされるであろう（ステップ１０３０）別の単一の初期化セグメントからの）イニシャライゼーションセグメントのみが考慮されるべきであることを示す値に設定する（ステップ１０２０）。説明のために、このｉｎｉｔ＿ｍｏｄｅパラメータの値は１に設定されてもよい。
反対に、部分適応セットが事前選択の外側で再生されてもよい場合、特定のｉｎｉｔ＿ｍｏｄｅパラメータ値は、図７を参照して記述されるような（ここでｉｎｉｔ＿ｍｏｄｅは「ｉｎｉｔ」属性によって表されている）連結が使用されてもよく、これが適合するビットストリームを導くことをクライアントに示すように設定される（ステップ１０２５）。初期化セグメントは、デフォルトでは主アダプテーションセットからのものか、又は任意的にはプリセレクション要素のｉｎｉｔＳｅｇｍｅｎｔ属性に示されているアダプテーションセットの初期化セグメントである。説明のために、このｉｎｉｔ＿ｍｏｄｅパラメータの値は３に設定されてもよい。主アダプテーションセットについてのものではない初期化セグメントを提供するステップ１０３０は、図９のステップ９１０を参照して記述した任意的なｉｎｉｔＳｅｇｍｅｎｔ属性を使用してシグナリングすることができる。
次に、プリセレクションは、それが含むメディアコンポーネントのリストと共に記述される（ステップ１０３５）。
上述したように、また実施形態によれば、プリセレクション要素は、例えば（図９を参照して記述する）ブーリアン属性、又は（図１０を参照して記述する）列挙された値又は事前定義された値をとる属性でありうる、新しい属性で拡張される。
初期化モードを示す新しい属性は任意的なものであってもよく、存在しないとき、クライアントは図６を参照して記述されたような連結を想定するだろう。属性がブーリアン（例えば「ｓｉｎｇｌｅ＿ｉｎｉｔ」）である場合における次の意味は、プリセレクション要素のこの新しい属性を定義する。
真に設定されると、この属性は、主アダプテーションセットの（任意的にはｉｎｉｔＳｅｇｍｅｎｔ属性によって示されるものからのもの）イニシャライゼーションセグメントの、後にプリセレクションで宣言されたそれぞれのアダプテーションセットのメディアセグメントが後に続くような連結が、ＤＡＳＨビットストリーム連結ルールに適合し、このレプレゼンテーションについての＠ｍｉｍｅＴｙｐｅ属性で識別されるメディアタイプに適合する、適合するセグメントシーケンスを表すことを示すだろう。メディアセグメントは、必ずしもプリセレクションにおける宣言順ではなく、任意の順序で連結されてもよいことが思い出される。
偽又は存在しないに設定された場合、この属性は、プリセレクションにおける各アダプテーションセットの初期化セグメントとメディアセグメントとの各連結が、ＤＡＳＨビットストリーム連結ルールに従い、このレプレゼンテーションについての＠ｍｉｍｅＴｙｐｅ属性で識別されるメディアタイプに適合する、適合するセグメントシーケンスを表すことを示すだろう。
また、プリセレクションにおいて宣言されたそれぞれの部分アダプテーションセットのレプレゼンテーションが、適合するセグメントのシーケンスにつながる場合もあれば、つながらない場合もあることにも留意されたい。これは、プリセレクション記述子の有無を調べることによって決定することができる。ＥｓｓｅｎｔｉａｌＰｒｏｐｅｒｔｙ記述子が存在する場合、プリセレクションの外側でアダプテーションセットを選択し及び再生することはできない。ＳｕｐｐｌｅｍｅｎｔａｌＰｒｏｐｅｒｔｙとして存在する場合、プリセレクションの外側でアダプテーションセットが選択され、再生されてもよい。
ＰｒｅｓｅｌｅｃｔｉｏｎＴｙｐｅのＸＭＬスキーマは、以下のように更新できる（任意的属性は太字とする（訳注：本翻訳文においては下線を付した））：
＜xs:complexType name="PreselectionType"＞
＜xs:complexContent＞
＜xs:extension base="RepresentationBaseType"＞
＜xs:sequence＞
＜xs:element name="Accessibility" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Role" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Rating" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Viewpoint" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜/xs:sequence＞
＜xs:attribute name="id" type="StringNoWhitespaceType" default="1"/＞
＜xs:attribute name="preselectionComponents" type="StringVectorType" use="required"/＞
＜xs:attribute name="lang" type="xs:language"/＞
＜xs:attribute name="single_init" type="xs:Boolean"/＞
＜xs:attribute name="initSegment" type="StringNoWhitespaceType" /＞
＜/xs:extension＞
＜/xs:complexContent＞
＜/xs:complexType＞
上述のように（特に図５、６、及び７を参照）、新しいプリセレクションの属性についての明示的な値の例は、「ｐｒｅｓｅｌｅｃｔ＿ｏｎｌｙ」又は「Ａｓ＿ｏｎｌｙ」又は「ｐｒｅｓｅｌｅｃｔ＿ｏｒ＿Ａｓ」である。これらの値は、それぞれが３つの初期化モードの１つに対応する、値１、２、及び３でエンコードされてもよい。当然、新しい応用例が追加の値を必要とする場合、追加の値を予約することによってこの機構は容易に拡張できる（これは、Ｂｏｏｌｅａｎ属性を使うことによる場合には当てはまらない）。
この変形例では、ＰｒｅｓｅｌｅｃｔｉｏｎＴｙｐｅのＸＭＬスキーマは以下のように更新されてもよい（任意的属性は太字とする（訳注：本翻訳文においては下線を付した））：
＜xs:complexType name="PreselectionType"＞
＜xs:complexContent＞
＜xs:extension base="RepresentationBaseType"＞
＜xs:sequence＞
＜xs:element name="Accessibility" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Role" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Rating" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜xs:element name="Viewpoint" type="DescriptorType" minOccurs="0" maxOccurs="unbounded"/＞
＜/xs:sequence＞
＜xs:attribute name="id" type="StringNoWhitespaceType" default="1"/＞
＜xs:attribute name="preselectionComponents" type="StringVectorType" use="required"/＞
＜xs:attribute name="lang" type="xs:language"/＞
＜xs:attribute name="initMode" type="InitalizationModeType" default="AS_only"/＞
＜xs:attribute name="initSegment" type="StringNoWhitespaceType" /＞
＜/xs:extension＞
＜/xs:complexContent＞
＜/xs:complexType＞
ＩｎｉｔｉａｌｉｚａｔｉｏｎＭｏｄｅＴｙｐｅは以下のように定義される：
＜xs:simpleType name=" InitializationModeType"＞
＜xs:restriction base="xs:string"＞
＜xs:enumeration value="preselect_only"/＞
＜xs:enumeration value="AS_only"/＞
＜xs:enumeration value="preselect_or_AS"/＞
＜/xs:restriction＞
＜/xs:simpleType＞
プリセレクションで宣言できるさまざまな初期化モードの意味は、次のように定義される：
ｉｎｉｔＭｏｄｅ属性は、ＤＡＳＨクライアントによって適用される連結ルールを示す。値が「ｐｒｅｓｅｌｅｃｔ－ｏｎｌｙ」、又はプリセレクション内の１つのアダプテーションセットからの１つの初期化セグメントのみが使用されることを示す任意の値である場合、主アダプテーションセットのイニシャライゼーションセグメントの（任意的にはｉｎｉｔＳｅｇｍｅｎｔ属性によって示されるものからの）、後にプリセレクション内で宣言された各アダプテーションセットのメディアセグメントが続くような連結は、ＤＡＳＨビットストリーム連結ルールに従い、このレプレゼンテーションについての＠ｍｉｍｅＴｙｐｅ属性で識別されるメディアタイプに適合する、適合するセグメントシーケンスを表すだろう。メディアセグメントは、必ずしもプリセレクションにおける宣言順ではなく、任意の順序で連結されてもよいことが思い出される。さらに、この値はアダプテーションセットがプリセレクションの外側で選択又は再生されてはいけないこと、すなわち各アダプテーションセットごとのイニシャライゼーションセグメントとメディアセグメントのシーケンスとの連結が、適合するビットストリームに導かないかもしれないこと、を示す。
値が「ＡＳ＿ｏｎｌｙ」、又は各アダプテーションセットが自身の初期化セグメントを使用することを示す任意の値である場合、プリセレクションの各アダプテーションセットの初期化セグメントとメディアセグメントとの各連結は、ＤＡＳＨビットストリーム連結ルールに従い、このレプレゼンテーションについての＠ｍｉｍｅＴｙｐｅ属性で指定されるメディアタイプに適合する、適合するセグメントシーケンスを表すだろう。
値が「Ｐｒｅｓｅｌｅｃｔ＿ｏｒ＿ＡＳ」に設定された場合、プリセレクションにおける各アダプテーションセットの初期化セグメントとメディアセグメントとの連結は、適合するセグメントシーケンスを表し、主アダプテーションセットの（任意的にはｉｎｉｔＳｅｇｍｅｎｔ属性によって示されるものからの）イニシャライゼーションセグメントの、後にプリセレクションにおいて宣言された各アダプテーションセットのメディアセグメントが続くような連結は、適合するセグメントシーケンスを表すだろう。ＤＡＳＨ規則に従って適合するセグメントシーケンスは、適合するビットストリームをもたらす。
プリセレクション記述子はこれらの新しい属性で拡張することもでき、ここではプリセレクション要素に対するものと同じ意味が適用されるだろう。
図１１は、本発明の実施形態に従う、ストリーミングマニフェストを受信した際にクライアントがメディアデータを処理するためのステップの例を示す。
メディアプレゼンテーション記述を取得した後で（ステップ１１００）、クライアントは、メディアプレゼンテーション記述が事前選択を含むかどうかをチェックする（１１０５）。事前選択がない場合、クライアントは、独立したアダプテーションセットに基づいて、標準的なコンテンツ選択及び適応ストリーミングを実行する（ステップ１１１０）。クライアントは、そのデコーダを初期化し（ステップ１１１５）、メディアコンポーネント、例えばメディアトラックを解析し（ステップ１１２０）、メディアストリームをデコードし（ステップ１１２５）、メディアプレゼンテーションを表示し又は格納する（ステップ１１３０）。
反対に、メディアプレゼンテーション記述が１つ以上の事前選択を含む場合、クライアントは、対応するプレゼンテーションをストリーミングするために事前選択を選択することができる（ステップ１１３５）。次に、クライアントは、選択された事前選択の記述を解析して、事前選択のメディアコンポーネントのリストを取得する（ステップ１１４０）。このステップは事前選択を再生するための、考慮する初期化セグメントに関する指示を提供することができる。
得られた記述から、クライアントはそのデコーダを初期化し（ステップ１１１５）、初期化が成功した場合、クライアントはプリセレクションのそれぞれのレプレゼンテーションからメディアセグメントを取得し、対応するトラックが解析され、デコードされ、クライアントのユーザインターフェース上でレンダリングされる（ステップ１１２０～１１３０）。
ステップ１１４０の間に実行されるステップの例が、図１２及び１３に示される。
図１２は、本発明の実施形態に従う、クライアントが事前選択の記述を解釈するためのステップの第１の例を示す。
図示されているように、クライアントは、選択された事前選択の記述を得た後（ステップ１２００）、プリセレクションの属性が、単一の初期化セグメントを使用することがシグナリングされたことを示しているかどうかをチェックする（ステップ１２０５）。
プリセレクションの属性が、単一の初期化セグメントを使用することがシグナリングされたことを示す場合、クライアントは主アダプテーションセットの（ステップ１２１０、又は任意的にはｉｎｉｔＳｅｇｍｅｎｔ属性によって示される１つのアダプテーションセットの）１つのレプレゼンテーションからの初期化セグメントを要求し、部分アダプテーションセットのレプレゼンテーションからのものを無視する。逆に、単一の初期化セグメントが使用されることがプリセレクションでシグナリングされていいない場合、クライアントは、プリセレクションで宣言されたアダプテーションセットごとに１つの初期化セグメントを要求する（ステップ１２１５）。
これらの初期化セグメントは次に、メディアデコーダに情報を提供し、それらのセットアップ又は初期化を実行するために、クライアントの解析／カプセル化解除モジュールによって処理される。クライアントは、プリセレクションからの任意のアダプテーションセットが選択可能であり、それ自体で再生可能であると仮定してもよい。各アダプテーションセットはまた、図９を参照して記述したように、このアダプテーションセットを選択し、再生することができるように、クライアントがプリセレクションをサポートするはずかどうかを示すプリセレクションディスクリプタ（ＰｒｅｓｅｌｅｃｔｉｏｎＤｅｓｃｒｉｐｔｏｒ）を有することができる。
図１３は、使用される初期化セグメントをシグナリングする属性が、初期化モードについての明示的な値（例えば「ｉｎｉｔ」又は「ｉｎｉｔＭｏｄｅ」属性）をとることができる場合における、本発明の実施形態に従う、クライアントによる事前選択の記述の解釈のためのステップの第２の例を示す。
図示されるように、選択された事前選択の記述を取得した後（ステップ１３００）、クライアントは事前選択要素記述から、初期化モードに関する情報を提供する属性の値、例えば「ｉｎｉｔ」又は「ｉｎｉｔ＿ｍｏｄｅ」属性を読み出す（ステップ１３０５）。
値が「ｐｒｅｓｅｌｅｃｔ＿ｏｎｌｙ」、すなわち事前選択のみモードを示すならば、クライアントは主アダプテーションセットの（ステップ１３１０、又は任意的にｉｎｉｔＳｅｇｍｅｎｔ属性によって示される１つのアダプテーションセットからの）１つのレプレゼンテーションからの初期化セグメントを要求し、部分アダプテーションセットのレプレゼンテーションからのものを無視する。反対に、値が事前選択のみモードを示さない場合、クライアントは、値がアダプテーションセットごとの初期化セグメントを示すかどうかをチェックする（ステップ１３１５）。
値がアダプテーションセットごとの初期化、すなわち「ＡＳ＿ｏｎｌｙ」を示すならば、クライアントはプリセレクションで宣言されたアダプテーションセットごとに１つの初期化セグメントを要求する（ステップ１３２０）。逆に、値が事前選択のみモードを示さず、またはアダプテーションセットごとの初期化、すなわち「ＡＳ＿ｏｎｌｙ」を示さない場合、クライアントは、プリセレクションからの任意のアダプテーションセット、又はプリセレクション全体を再生することを決定してもよい（ステップ１３２５）。前者の場合、選択されたアダプテーションセットの１つのレプレゼンテーションについての初期化セグメントのみを必要とする。後者の場合、主アダプテーションセット内の（又任意的にはｉｎｉｔＳｅｇｍｅｎｔ属性によって示される１つのアダプテーションセットからの）１つのレプレゼンテーションの初期化セグメントを取得するだけでよい。
これらの初期化セグメントは次に、クライアントの解析／カプセル化解除モジュールによって処理され、メディアデコーダに情報を提供し、それらのセットアップ又は初期化を実行する。
図１４は、本発明の１つ以上の実施形態を実装するためのコンピューティング装置１４００の概略ブロック図である。コンピューティング装置１４００は、マイクロコンピュータ、ワークステーション、又は軽量ポータブル装置などの装置であってもよい。コンピューティング装置１４００は、以下のもの接続された通信バス１４０２を備える：
マイクロプロセッサのような中央処理装置（ＣＰＵ）１４０４；
本発明の実施形態の方法の実行可能なコードを格納するためのランダムアクセスメモリ（ＲＡＭ）１４０８に加えて、メディアデータを伝送する方法を実装するために必要な変数及びパラメータを記録するように構成され、そのメモリ容量が例えば拡張ポートに接続された任意的なＲＡＭによって拡張可能であるレジスタ；
本発明の実施形態を実装するためのコンピュータプログラムを格納するため読み出し専用メモリ（ＲＯＭ）１４０６；
ネットワークインターフェース１４１２であって、引き続いて典型的には通信ネットワーク１４１４に接続され、この通信ネットワークを介して処理されるデジタルデータが送信又は受信される。ネットワークインターフェース１４１２は単一のネットワークインターフェースであってもよいし、異なるネットワークインターフェースのセット（例えば、有線及び無線インターフェース、又は異なる種類の有線又は無線インターフェース）から構成されてもよい。データは、ＣＰＵ１４０４内で実行されているソフトウェアアプリケーションの制御の下で、送信のためにネットワークインターフェースに書き込まれ、又は受信のためにネットワークインターフェースから読み出される；
ユーザからの入力を受信し、又はユーザに情報を表示するためのユーザインターフェース（ＵＩ）１４１６；
ハードディスク（ＨＤ）１４１０；
ビデオソース又はディスプレイのような外部装置から／へとデータを受信／送信するためのＩ／Ｏモジュール１４１８。
実行可能コードは、読み出し専用メモリ１４０６、ハードディスク１４１０、又は例えばディスクのようなリムーバブルデジタル媒体のいずれかに格納することができる。変形例によれば、プログラムの実行可能コードは、実行される前に、ハードディスク１４１０のような通信装置１４００の格納手段の１つに格納されるように、ネットワークインターフェース１４１２を介して通信ネットワークを用いて受信することができる。
中央処理装置１４０４は、前述の格納手段の１つに格納されている、本発明の実施形態に従う１つのプログラム又は複数のプログラムのソフトウェアコードの命令又は部分の実行を制御し、指示するように構成されている。電源投入後、ＣＰＵ１４０４は、例えばプログラムＲＯＭ１４０６又はハードディスク（ＨＤ）１４１０からそれらの命令がロードされた後に、ソフトウェアアプリケーションに関する主ＲＡＭメモリ１４０８からの命令を実行することができる。このようなソフトウェアアプリケーションは、ＣＰＵ１４０４によって実行されると、前の図に示されたフローチャートのステップを実行させる。
この実施形態では、装置は本発明を実装するためにソフトウェアを使用するプログラム可能装置である。しかしながら、代替的に、本発明はハードウェア（例えば、特定用途向け集積回路又はＡＳＩＣの形態）で実装されてもよい。
本発明が特定の実施形態を参照して上述されたが、本発明は特定の実施形態に限定されず、本発明の範囲内にある変形例は当業者には明らかであろう。
多くのさらなる変形例及びバリエーションが、前述の例示的な実施形態を参照した当業者に対して示唆されており、前述の例示的な実施形態は例示としてのみ与えられたものであり、本発明の範囲を限定することを意図したものではなく、本発明の範囲は、添付の特許請求の範囲によってのみ決定される。特に、様々な実施形態からの異なる特徴は、適宜、交換されてもよい。
特許請求の範囲において、単語「含む」は他の要素又はステップを除外せず、不定冠詞「ａ」又は「ａｎｄ」は複数を除外しない。異なる特徴が相互に異なる従属請求項に記載されているという単なる事実は、これらの特徴の組み合わせを有利に使用できないことを示すものではない。
特許請求の範囲において、単語「含む」は他の要素又はステップを除外しない。異なる特徴が相互に異なる従属請求項に記載されているという単なる事実は、これらの特徴の組み合わせを有利に使用できないことを示すものではない。

Claims (20)

  1. サーバがメディアプレゼンテーション記述（ＭＰＤ）を生成する方法であって、
    複数のメディアコンポーネントの事前選択を処理するために使用される連結ルールを識別するための情報項目を取得することと、
    前記事前選択を記述し、前記事前選択のそれぞれのメディアコンポーネントへの参照、及び取得された前記情報項目を含む、前記メディアプレゼンテーション記述を生成することと、
    を含む方法。
  2. 前記連結ルールは、前記メディアプレゼンテーション記述にアクセスするクライアントが、適合するビットストリームを生成するために前記事前選択を処理することを可能とする、請求項１に記載の方法。
  3. 各メディアコンポーネントは初期化データ及びメディアデータを含み、前記連結ルールは、前記事前選択の前記メディアコンポーネントのメディアデータを処理するためにクライアントによって使用される前記複数のメディアコンポーネントの初期化データを特徴付ける、請求項１又は２に記載の方法。
  4. 前記連結ルールは、前記複数のメディアコンポーネントのうちの単一のメディアコンポーネントに属する初期化データが、前記事前選択の前記メディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする、請求項３に記載の方法。
  5. 前記初期化データが使用されるべきである前記単一のメディアコンポーネントへの参照が予め決定されている、請求項４に記載の方法。
  6. 前記メディアプレゼンテーション記述は、前記事前選択によって参照されるメディアコンポーネントの前記メディアデータが、前記事前選択によって参照される他のメディアコンポーネントの他のメディアデータとは独立して処理されることができるか否かを示すためのデータを含む、請求項４又は５に記載の方法。
  7. 前記連結ルールは、前記複数のメディアコンポーネントのうちのいくつかのメディアコンポーネントからの初期化データが、前記事前選択の前記メディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする、請求項３に記載の方法。
  8. 記述された前記事前選択は複数のアダプテーションセットからのレプレゼンテーションのセットを参照し、前記複数のアダプテーションセットのそれぞれは１つ以上のメディアコンポーネントを記述し、各メディアコンポーネントは初期化データ及びメディアデータを含む、請求項１から７のいずれか１項に記載の方法。
  9. 連結ルールを識別するための前記情報項目は、記述された前記事前選択の第１のアダプテーションセットに属する初期化データがクライアントによって使用されるべきであることをシグナリングし、前記初期化データは記述された前記事前選択に含まれる他のアダプテーションセットのメディアデータと連結されるべきであり、前記他のアダプテーションセットは前記第１のアダプテーションセットとは異なる、請求項４に直接又は間接的に従属する請求項８に記載の方法。
  10. 前記初期化データが初期化セグメントに対応し、前記メディアデータが１つ又はいくつかのメディアセグメントに対応する、請求項３に直接的又は間接的に従属する、請求項３から６、８及び９のいずれか１項に記載の方法。
  11. 前記初期化セグメントはムービーボックスを含み、前記メディアセグメントはムービーフラグメントボックス及びメディアデータボックスを含む、請求項１０に記載の方法。
  12. クライアントがメディアコンテンツを処理する方法であって、前記メディアコンテンツはメディアコンポーネントを含み、前記方法は前記クライアントによって実行され、
    メディアプレゼンテーション記述を取得することを含み、
    前記メディアプレゼンテーション記述は、複数のメディアコンポーネントの事前選択の記述を含み、前記事前選択の前記記述は、前記複数のメディアコンポーネントのうちの前記メディアコンポーネントへの参照と、前記事前選択を処理するために使用される連結ルールを識別するための情報項目とを含み、
    前記連結ルールを識別するための前記情報項目を得るために取得された前記メディアプレゼンテーション記述を解析することを含む方法。
  13. 各メディアコンポーネントは初期化データ及びメディアデータを含み、前記連結ルールは、前記複数のメディアコンポーネントのどの初期化データが前記事前選択の前記メディアコンポーネントのメディアデータを処理するためにクライアントによって使用されるべきかを特徴付け、前記方法は、前記連結ルールの関数として前記複数のメディアコンポーネントの初期化データを識別することと、識別された前記初期化データを要求することと、識別された前記初期化データの関数として前記クライアントの少なくとも１つのデコーダを初期化することをさらに含む、請求項１２に記載の方法。
  14. 前記連結ルールは、前記複数のメディアコンポーネントのうちの単一のメディアコンポーネントに属する初期化データが、前記事前選択の前記メディアコンポーネントのメディアデータを処理するために使用されるべきであることをシグナリングする、請求項１３に記載の方法。
  15. 前記連結ルールは、前記事前選択によって参照されるメディアコンポーネントの前記メディアデータは、前記事前選択によって参照される他のメディアコンポーネントの他のメディアデータとは独立して処理されることができないことをさらにシグナリングする、請求項１４に記載の方法。
  16. プログラム可能装置のためのコンピュータプログラムであって、前記プログラム可能装置へとロードされ及び前記プログラム可能装置によって実行されたときに、請求項１から１５のいずれか１項に記載の方法のステップのそれぞれを実行するための一連の命令を含む、コンピュータプログラム。
  17. 請求項１から１５のいずれか１項に記載の方法のステップのそれぞれを実行するためのコンピュータプログラムの命令を格納する、コンピュータが読み取り可能な記憶媒体。
  18. 請求項１から１５のいずれか１項に記載の方法のステップのそれぞれを実行するように構成された処理部を備える、メディアプレゼンテーション記述を生成する又はカプセル化されたメディアデータを処理する装置。
  19. メディアコンテンツのための情報データセットを搬送する信号であって、前記情報データセットはメディアプレゼンテーション記述を含み、前記メディアコンテンツはメディアコンポーネントを含み、前記メディアプレゼンテーション記述は、前記メディアコンテンツの複数のメディアコンポーネントの事前選択の記述と、前記事前選択を処理するためにクライアントによって使用される連結ルールを識別するための情報項目と、を少なくとも含む、信号。
  20. メディアコンテンツのための情報データセットを搬送する信号を格納するメディア格納装置であって、前記情報データセットはメディアプレゼンテーション記述を含み、前記メディアコンテンツはメディアコンポーネントを含み、前記メディアプレゼンテーション記述は、前記メディアコンテンツの複数のメディアコンポーネントの事前選択の記述と、前記事前選択を処理するためにクライアントによって使用される連結ルールを識別するための情報項目と、を少なくとも含む、メディア格納装置。
JP2021531284A 2019-03-12 2020-03-02 カプセル化されたメディアコンテンツの利用可能な部分をシグナリングするための方法、装置、及びコンピュータプログラム Active JP7241874B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GB1903394.3 2019-03-12
GB1903394.3A GB2582155B (en) 2019-03-12 2019-03-12 Method, device, and computer program for signaling available portions of encapsulated media content
PCT/EP2020/055464 WO2020182524A1 (en) 2019-03-12 2020-03-02 Method, device, and computer program for signaling available portions of encapsulated media content

Publications (2)

Publication Number Publication Date
JP2022522575A true JP2022522575A (ja) 2022-04-20
JP7241874B2 JP7241874B2 (ja) 2023-03-17

Family

ID=66380253

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021531284A Active JP7241874B2 (ja) 2019-03-12 2020-03-02 カプセル化されたメディアコンテンツの利用可能な部分をシグナリングするための方法、装置、及びコンピュータプログラム

Country Status (5)

Country Link
US (1) US11575951B2 (ja)
JP (1) JP7241874B2 (ja)
CN (1) CN113615205A (ja)
GB (1) GB2582155B (ja)
WO (1) WO2020182524A1 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220078298A (ko) * 2020-12-03 2022-06-10 삼성전자주식회사 적응적 증강 현실 스트리밍 제공 방법 및 이를 수행하는 장치
WO2023159143A2 (en) * 2022-02-17 2023-08-24 Bytedance Inc. Method, apparatus, and medium for video processing

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018069357A1 (en) * 2016-10-10 2018-04-19 Canon Kabushiki Kaisha Methods, devices, and computer programs for improving rendering display during streaming of timed media data
JP2018522469A (ja) * 2015-06-16 2018-08-09 キヤノン株式会社 画像データカプセル化
JP2019504341A (ja) * 2015-12-01 2019-02-14 クアルコム，インコーポレイテッド トランスポートのためのコード化された次世代オーディオデータの選択

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8918533B2 (en) * 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
KR101739272B1 (ko) * 2011-01-18 2017-05-24 삼성전자주식회사 멀티미디어 스트리밍 시스템에서 컨텐트의 저장 및 재생을 위한 장치 및 방법
US10284612B2 (en) * 2013-04-19 2019-05-07 Futurewei Technologies, Inc. Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol
GB2533624B (en) * 2014-12-23 2017-08-09 Canon Kk Methods, devices, and computer programs for improving coding of media presentation description data
EP3703384B1 (en) * 2016-02-16 2024-02-14 Nokia Technologies Oy Media encapsulating and decapsulating
JP7035401B2 (ja) * 2017-09-15 2022-03-15 ソニーグループ株式会社 画像処理装置およびファイル生成装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018522469A (ja) * 2015-06-16 2018-08-09 キヤノン株式会社 画像データカプセル化
JP2019504341A (ja) * 2015-12-01 2019-02-14 クアルコム，インコーポレイテッド トランスポートのためのコード化された次世代オーディオデータの選択
WO2018069357A1 (en) * 2016-10-10 2018-04-19 Canon Kabushiki Kaisha Methods, devices, and computer programs for improving rendering display during streaming of timed media data

Also Published As

Publication number Publication date
US11575951B2 (en) 2023-02-07
US20220150557A1 (en) 2022-05-12
GB2582155B (en) 2023-12-27
GB201903394D0 (en) 2019-04-24
WO2020182524A1 (en) 2020-09-17
JP7241874B2 (ja) 2023-03-17
CN113615205A (zh) 2021-11-05
GB2582155A (en) 2020-09-16

Similar Documents

Publication Publication Date Title
JP6924266B2 (ja) 生成されたコンテンツを含むビデオデータを符号化するための方法および装置
US11638066B2 (en) Method, device and computer program for encapsulating media data into a media file
US20230025332A1 (en) Method, device, and computer program for improving encapsulation of media content
JP2017515336A (ja) 分割タイムドメディアデータのストリーミングを改善するための方法、デバイス、およびコンピュータプログラム
JP7249413B2 (ja) カプセル化メディアコンテンツの部分の送信を最適化する方法、装置及びコンピュータプログラム
KR20110101101A (ko) 파일 포맷 기반의 적응적 스트림 생성, 재생 방법 및 장치와 그 기록 매체
JP2013532441A (ja) 符号化マルチコンポーネント・ビデオをカプセル化する方法および装置
CN110996160B (zh) 视频处理方法、装置、电子设备及计算机可读取存储介质
US20130097334A1 (en) Method and apparatus for encapsulating coded multi-component video
JP7241874B2 (ja) カプセル化されたメディアコンテンツの利用可能な部分をシグナリングするための方法、装置、及びコンピュータプログラム
JP6632550B2 (ja) タイムピリオドにまたがってオブジェクトを識別する方法および対応デバイス
US20230370659A1 (en) Method, device, and computer program for optimizing indexing of portions of encapsulated media content data
WO2022148650A1 (en) Method, device, and computer program for encapsulating timed media content data in a single track of encapsulated media content data
US20220337922A1 (en) Methods and devices for improving storage and transmission of uncompressed data while using a standard format
US20220360831A1 (en) Method, device, and computer program for encapsulating media data into a media file
GB2620582A (en) Method, device, and computer program for improving indexing of portions of encapsulated media data
JP2013534101A (ja) 符号化マルチコンポーネント・ビデオをカプセル化する方法および装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210802

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210802

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220816

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220902

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221026

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230307

R151 Written notification of patent or utility model registration

Ref document number: 7241874

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151