JP2021093746A - 空間的不均等ストリーミング - Google Patents
空間的不均等ストリーミング Download PDFInfo
- Publication number
- JP2021093746A JP2021093746A JP2021024317A JP2021024317A JP2021093746A JP 2021093746 A JP2021093746 A JP 2021093746A JP 2021024317 A JP2021024317 A JP 2021024317A JP 2021024317 A JP2021024317 A JP 2021024317A JP 2021093746 A JP2021093746 A JP 2021093746A
- Authority
- JP
- Japan
- Prior art keywords
- quality
- spatial
- media segment
- information
- encoded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
- H04N13/117—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation the virtual viewpoint locations being selected by the viewers or determined by viewer tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/366—Image reproducers using viewer tracking
- H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2362—Generation or processing of Service Information [SI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
マッピングするように選択された投影に依存して、タイル当たりの角度シーン適用範囲はこのシーンおよび個々のタイルが相互に重なり得るという事実により変化し得、ビューセクションの向きに関係なく、空間的にビューセクションをカバーするのに十分な隣接タイルの数の計算でさえ、より困難になる。従って、そのような状況では、前述の情報は、タイルの数Nまたはタイルの数としてそれぞれ第1の部分のサイズを示すことができる。この手段によって、装置は、所定の品質でそこに符号化されたN個のタイルの同じ場所に配置された集合体を有するそれらのメディアセグメントを選択することによって時間的に変化するビューセクションを追跡することができる。これらN個のタイルの集合がビューセクションを十分にカバーするという事実は、Nを示す情報によって保証され得る。別の例は、メディアセグメントに含まれる情報および/またはサーバから取得される信号化であり、それはビューセクション自体のサイズに対する第1の部分のサイズを示す。例えば、この情報は、時間的に変化するビューセクションの動きを考慮するために、実際のビューセクションの周りに何らかの形で「安全ゾーン」またはプリフェッチゾーンを設定することができる。時間的に変化するビューセクションが空間シーンを横切って移動する速度が大きいほど、安全ゾーンは大きくなる。従って、前述の情報は、インクリメンタル方式またはスケーリング方式など、時間的に変化するビューセクションのサイズに対する方法で第1の部分のサイズを示すことができる。そのような情報に従って第1の部分のサイズを設定する検索装置は、そうでなければ空間シーンの未検索部分または低品質部分がビューセクションに見えるために起こり得る品質劣化を回避することができるであろう。ここでは、このシーンがタイルベースの方法で提供されるのか、他の方法で提供されるのかは無関係である。
て、第1の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間測定値または統計値を送る。瞬間測定値および/または統計値には、それぞれの瞬間測定値または統計値が得られた時間に関する時間情報を提供することができる。ログメッセージは、メディアセグメントが提供されているサーバ、またはインバウンドログメッセージを評価する他のデバイスに送信され、それに基づいて、サイズまたはサイズおよび/または位置を設定するために使用される前述の情報の現在の設定を更新する。または第1の部分の位置、および/またはそれに基づいて所定の関係を導き出す。
送信することによってクライアント10によって送信された要求に応答し、それ自体でさらなる情報をクライアント10に送信することができる。これに関する詳細もまた以下に記載される。コントローラ36は、要求されたメディアセグメントを記憶装置34から取出すことができる。この記憶装置内には、サーバ20からクライアント10に送信された他の信号に、メディアプレゼンテーション記述またはその一部などの他の情報も記憶され得る。
)44を含むように描かれている。クライアント装置40は、適切にプログラムされたコンピュータ、マイクロプロセッサ、FPGAなどのプログラムされたハードウェア装置、または特定用途向け集積回路などであり得る。クライアント装置40は、サーバ20で提供される複数の46のメディアセグメントの中からサーバ20から検索されるべきセグメントを選択することを引き受ける。この目的のために、クライアント装置40は最初にサーバ20からマニフェストまたはメディアプレゼンテーション記述を検索する。同様に、クライアント装置40は、空間シーン30のある必要とされる空間部分に対応する複数46の中からメディアセグメントのアドレスを計算するための計算規則を取得する。このように選択されたメディアセグメントは、それぞれの要求をサーバ20に送信することによってクライアント装置40によってサーバ20から検索される。これらの要求は計算されたアドレスを含む。
相互のタイル重複を含み得る。そして以下により詳細に概説されるように、シーン30をタイル50に空間的に細分し、各タイルが以下にさらに説明されるように1つの表現を形成することもまた必須ではない。
タイルT、およびいくつかの時間セグメントtに依存し得る。アドレスは、例えばURLであり得る。
に検索されたメディアセグメントに符号化される品質が所定の関係を満たすようにメディアセグメントを選択する。所定の関係がどのように見えるかについての例もまた以下に示される。
択されたメディアセグメントに符号化することができる選択可能な品質レベルペアにおける制限を考慮することができる。
明した品質の違いの受入れは、これらの異なる品質がユーザに表示される時間に左右される。例えば、品質差が大きいコンテンツは、200マイクロ秒の間だけ表示されるのであれば許容できるかも知れないが、品質差が小さいコンテンツは、500マイクロ秒の間表示されるのであれば許容可能かも知れない。従って、さらなる例によれば、情報68は、例えば、上述の品質の組合せに加えて、または許容される品質の差に加えて、組合せ/品質の差が許容され得る時間間隔も含み得る。換言すれば、情報68は、部分66が部分64と同時にビューセクション28内に示され得る最大許容時間間隔の表示とともに、部分66と64の品質間の許容できるまたは最大許容差を示し得る。
部分64は、より高い品質の支出が価値がある関心領域に対応し、一方、部分66は、例えば、低帯域幅条件による品質低下が部分64に対する品質低下を考慮する前に考慮されるべき部分である。
シーンまたはそれに符号化された一定の空間セクション62を有する。
時間的長さに対応する時間的セグメント54の持続時間のような部分64の空間的位置を調整する際の待ち時間を決定する。この持続時間が全方向であるビューポート28の現在位置の円周に加わる速度時間は、そのような最悪の場合の円周になり得、移動しないビューポート28を想定する部分64のある最小拡大に対する部分64の拡大を決定するために使用され得る。
ション28は、ユーザによって制御される、すなわち、装置40は、ビューセクション28が頭の動き、眼球の動き、タブレットの動きなどのいずれによって制御されているかを確認し、そのようなビュー部分制御に対応する情報74の部分に従ってサイズを設定する方法についての知識を得る。
向に関係なく、ある大きさの視野を完全に覆うのに十分であるかについて評価することはほとんど容易である。ここで、情報74はこの状況を軽減し、装置40は情報74内で装置40に適用されるビューセクション28のサイズに使用されるべき部分64のサイズの値を単純に調べることができる。すなわち、図5の実施形態によれば、DASHクライアント、またはイベントボックスまたはSANDメッセージなどのいくつかの曲がったメカニズムに利用可能にされたメディアプレゼンテーション記述は、球形の範囲またはそれぞれ表現の集合またはタイルの集合の視野に関する情報74を含むことができる。一例は、図1に示すようにM個の表現を有するタイル張りのオファリングであり得る。情報74は、例えば図1に示すように6×4タイルにタイル状に並べられた立方体表現の中から、所与の端部装置の視野をカバーするためにダウンロードする推奨数n <M(表現と呼ばれ
る)を示すことができ、12枚のタイルで90°×90°の視野をカバーするのに十分であると考えられる。端部装置の視野が必ずしもタイルの境界と完全に揃っているとは限らないため、この推奨は、装置40単独では自明に生成することはできない。装置40は、例えば少なくともN個のタイル、すなわちN個のタイルに関するメディアセグメント58をダウンロードすることによって情報74を使用することができる。情報を利用する別の方法は、端部装置の現在のビュー中心に最も近いセクション62内のN個のタイルの品質を強調すること、すなわちセクション62の部分64を構成するためにN個のタイルを使用することである。
第1の部分64の空間位置および/または移動を測定する瞬間的な測定値または統計値
選択されたメディアセグメントに符号化され、ビューセクション28に見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定値または統計値および/または
選択されたメディアセグメントに符号化され、ビューセクション28に見える限りにおいて、第1の部分の品質または時間的に変化する空間シーン30の品質を測定する瞬間測定値または統計値
1の附属書Dに定義されているものに追加のDASHメトリクスが必要である。
更する必要があるその他の大きさを通知するようなものである。
投影を示す。ハッチングを付したタイルは高解像度タイルを示し、従って高解像度部分64を形成し、一方、ハッチングなしで示したタイル50は低解像度タイルを示し、従って低解像度部分66を形成する。セグメント選択およびダウンロードの最後の更新以降にビューポート28が変更されたときに部分的に低解像度のタイルがユーザに提示され、これにより、ダウンロード可能なセグメント58にコード化されたタイル50の投影面またはピクセルアレイがあるキューブ上に各タイルの解像度が決定されることを見ることができる。
に関してこれまで説明した例の場合に有効なように投影面内で空間的に均一な方法で品質を平均することによって測定されるのではないが、この平均化を、ピクセル、すなわち投影面にわたって不均一に重み付けする。平均化は、球状に一様な方法で実行されてもよい。一例として、平均化は、円198がそうであるように分布したサンプル点に関して一様に実行されてもよい。換言すれば、局所投影面距離の増加と共に二次的に減少し、視点と接続する線に対する投影の局所傾斜の正弦に従って増加する重みによって局所密度を重み付けすることによって平均化を実行することができる。メッセージは、例えば均一球サンプリンググリッドを使用することによって、利用可能な投影のいくつかの固有のオーバーサンプリング(Equirectangular Projectionなど)を調整するためのオプションの(フラグ制御)ステップを含むことができる。いくつかの投射は大きなオーバーサンプリングの問題を持たず、オーバーサンプリングのコンピューティング除去を強制することは不必要な複雑さの問題につながり得る。これはEquirectangular Projectionに限定されてはならない。レポート作成では、水平方向と垂直方向の解像度を区別する必要はないが、それらを組合わせることは可能である。以下に一実施形態を示す。
#Pに符号化されるかを示すことによって異なる分布、およびこれらのP表現Rをどのようにして(オプションで)MPD内の#1〜#Sのインデックスを付けた適応セットAにグループ化することができるか、P表現Rのセグメント58をどのようにして#1〜#Nのインデックスを付けたバッファに分配することができるかを示す。
別の表現セットと分布は次のようになる。
・Tile(タイル)
・Viewport(ビューポート)
・Region(領域)
・AdaptationSet(アダプテーションセット)
・Representation(表現)
・Low quality version of the whole content(コンテンツ全体の低品質版)
されている。
表1:バッファレベルのリスト
その場合、分布は次のようになる:
表2:削除イベントの一覧
資源の存在、すなわち、対応する数のデコーダ42などのある復号化能力を必要とする。そのような数のデコーダが存在しない場合、サーバ20によって提供されるサービスはクライアントにとって有用ではないのかもしれない。従って、サーバ20によって提供されるMPDは、「恩恵を受ける要件」、すなわち提供されるサービスを使用するのに必要なデコーダの数を示すことができる。しかしながら、サーバ20は、異なるバージョンに対してMPDを提供してもよい。すなわち、異なるバージョンのための異なるMPDがサーバ20によって利用可能であり得るか、またはサーバ20によって提供されるMPDは、内部で、サービスが使用され得る異なるバージョン間を区別するように構成され得る。例えば、バージョンは、視野、すなわち視野セクション28のサイズにおいて異なり得る。異なるサイズの視野は、セクション62内のタイルの数が異なることで明らかになり、したがって、たとえば、これらのバージョンでは異なる数のデコーダが必要になる可能性があるという点で、利点要件が異なる場合がある。他の例も考えられる。例えば、視野が異なるバージョンは同じ複数のメディアセグメント46を含み得るが、別の例によれば、サーバ30においてシーン30がタイルストリーミング用に提供される異なるバージョンは、対応するバージョンに従って含まれる複数46のメディアセグメントさえも異なり得る。例えば、1つのバージョンによるタイル分割は、他のバージョンによるシーンのタイルハイフン分割と比較して粗いので、例えば、より少ない数のデコーダを必要とする。
ルを示すことを可能にする複数の位置を含む。典型的なプロファイルは、属性、MPDに存在する可能性がある要素、および各表現に対して提供されるストリームのビデオまたはオーディオプロファイルを記述する。
十分であることを意味する。プロファイルに応じて、DASHクライアントはMPDまたはMPD(アダプテーションセット)の一部を無視または受入れることができる。さらに、XlinkやMPDチェーニングなど、選択に関するシグナリングがほとんど利用できないなど、すべての情報が含まれていないメカニズムもいくつか存在する。このような状況では、DASHクライアントは、コンテンツを消費できるかどうかを導出できない。XlinkまたはMPD Chainingまたは同様のメカニズムを実行することが理に
かなっているかどうかにかかわらず、DASHクライアントができるように、そのようなurn(または同様のもの)を使用して、デコーダの数および各デコーダのプロファイル/レベルに関してデコード機能を公開することが必要である。シグナリングはまた、X個
のプロファイル/レベルを有するN個のデコーダ、またはY個のプロファイル/レベルを有するZ個のデコーダのような異なる動作点を意味し得る。
にコンテンツが問題ないような追加のスペースを加えたものとして使用するには「十分に十分」なものである。ユーザがその合図の直径を超えて移動する場合は、別の球を使用して内容を表示する必要がある。ユーザがその示された直径を超えて移動する場合は、別の球を使用して内容を表示する必要がある。
はAdaptationSet要素において示され得る。
る。図4−図7cに関する説明に関してそうであったように、情報74は、タイルの数のように、領域116の寸法を絶対的に設定することができ、または領域116の速度を設定することができ、ビデオの興味深いコンテンツを時空間的に追跡するために、例えばユーザ入力などに従って移動させ、それによって速度の指示の増加と共に増加するようにエリア116をスケーリングする。
。データストリームまたは一連の信号は、例えばインターネットなどのデータ通信接続を介して転送されるように構成されてもよい。
Claims (118)
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするための装置であって、
サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択し(56)、
サーバ(20)からの選択されたメディアセグメント(60)であり、ここで、装置は、
前記選択されたメディアセグメントが、前記空間的セクションの第1の部分(64)が所定の品質で前記選択されたメディアセグメントに符号化され、かつ第1の部分(64)に空間的に隣接する時間的に変化する空間シーンの第2の部分(66)が、所定の関係に関して所定の関係を満たすさらなる品質で前記選択されたメディアセグメントに符号化される方法で符号化された時間的に変化する空間的シーン(30)の空間的セクション(62)を少なくとも有するように選択を実行し、かつ、
前記選択されたメディアセグメントに含まれる情報(68)および/または前記サーバ(20)から得られる信号伝達から所定の関係を導き出す、
ように構成される装置。
- 前記複数(46)のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する1つで、前記時間的に変化する空間シーン(30)の関連する時空間部分に符号化されている、請求項1に記載の装置。
- 前記複数(46)のメディアセグメントに符号化された前記時間的に変化する空間シーン(30)の各時空間部分は、時間的に変化する空間シーン(30)が空間的に細分されているタイル(50)における前記時間的に変化する空間シーン(30)の時間セグメント(54)である、請求項2に記載の装置。
- 前記情報(64)は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項1から3のいずれかに記載の装置。
- 前記情報(68)は、前記ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項4に記載の装置。
- 前記情報は、ビューセクション(28)までのそれぞれの距離と、それぞれの距離を超えた差を測定するための対応する許容値との差の対のリストとして前記ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項4または5に記載の装置。
- 前記情報(64)は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は前記ビューセクションまでの距離が増すにつれて増大する、請求項4ないし6のいずれかに記載の装置。
- 前記情報(64)は、前記第2の部分が前記第1の部分と共に前記ビューセクション内にあり得る最大許容時間間隔の表示と共に、さらなる品質と所定の品質との間の差の尺度についての許容値を示す、請求項4ないし7のいずれかに記載の装置。
- 前記情報(64)は、さらなる品質と所定の品質との間の前記差を測定するためのさらなる許容値を、前記第2の部分が前記第1の部分に沿った前記ビューセクション内に存在し得る最大許容時間間隔の表示と共に示す、請求項8に記載の装置。
- 前記情報(64)が時間的変化および/または空間的に変化することを特徴とする請求項4から9のいずれかに記載の装置。
- 前記情報(64)は、前記さらなる品質および前記所定の品質について許容される同時設定の対を示す、請求項1から10のいずれかに記載の装置。
- 前記装置は、前記第1の部分が前記時間的に変化する空間シーン(30)の時間的に変化するビューセクション(28)に追従するように前記選択を実行するように構成されている、請求項1に記載の装置。
- 前記装置は、前記時間的に変化するビューセクション(28)の空間的位置がユーザ入力に従って変化するように構成されている、請求項12に記載の装置。
- 前記装置は、関心領域に対応するように前記第1の部分を決定するように構成されている、請求項1から13のいずれかに記載の装置。
- 前記装置は、前記ROIに関する情報を前記サーバから検索するように構成されている、請求項14に記載の装置。
- 時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第1の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第1の部分と空間的に隣接する時間的に変化する空間シーンの第2の部分がさらなる品質で選択されたメディアセグメントに符号化され、
メディアセグメント内の所定の関係に関する情報および/または装置への信号伝達によって、所定の品質に対するさらなる品質によって満たされるべき所定の関係を有する信号情報とを含むように構成される、ストリーミングサーバ。
- 前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する1つで前記時間的に変化する空間シーンの関連する時空間部分を符号化している
、請求項16に記載のストリーミングサーバ。
- 前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン(30)の各時空間部分は、時間的に変化する空間シーン(30)が空間的に細分されるタイル(50)のそれぞれの1つにおいて、前記時間的に変化する空間シーン(30)の時間セグメント(54)である、請求項17に記載のストリーミングサーバ。
- 前記情報(64)は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項16ないし請求項18のいずれかに記載のストリーミングサーバ。
- 前記情報(68)は、前記ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差を測定するための前記許容値を示す、請求項19に記載のストリーミングサーバ。
- 前記情報は、前記ビューセクション(28)までのそれぞれの距離および前記それぞれの距離を超えた差の測定のための対応する許容値とのペアのリスト(28)によって、ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示す、請求項19または20に記載のストリーミングサーバ。
- 前記情報は、前記さらなる品質と前記所定の品質との間の差の測定のための前記許容値を示し、それにより前記許容値は、前記ビューセクションまでの距離が増すにつれて増大する、請求項19ないし21のいずれかに記載のストリーミングサーバ。
- 前記情報(64)は、前記第2の部分が前記第1の部分と共にビューセクション内にあってもよい許容される最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項19ないし22のいずれかに記載のストリーミングサーバ。
- 前記情報(64)は、前記第2の部分が前記第1の部分と共にビューセクション内にあってもよいさらなる最大許容時間間隔の表示と共に、前記さらなる品質と前記所定の品質との間の差の測定に対するさらなる許容値を示す、請求項23に記載のストリーミングサーバ。
- 前記情報(64)は時間および/または空間的に変化している、請求項19ないし24のいずれかに記載のストリーミングサーバ。
- 前記情報(64)は、前記さらなる品質および前記所定の品質に関して許容される同時設定のペアを示す、請求項19ないし25のいずれかに記載のストリーミングサーバ。
- 前記装置は、ROIに関する情報を前記装置に送信するように構成されている、請求項19ないし26のいずれかに記載のストリーミングサーバ。
- 複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも1つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、前記空間セクションの第1の部分が所定の品質で選択されたメディアセグメントに符号化され、それに応じて第1の部分に空間的に隣接する時間的に変化する空間シーンの第2の部分が選択されたメディアセグメントによりさらなる品質に符号化される情報と、
前記所定の品質に関するさらなる品質によって満たされるべき所定の関係に関する情報(64)とを含む、メディアプレゼンテーション記述。
- 前記複数のメディアセグメントの各メディアセグメント(46)は、一組の品質レベルのうちの関連する1つで、前記時間的に変化する空間シーン(30)の関連する時空間部分をその中に符号化している、請求項28に記載のメディアプレゼンテーション記述。
- 前記複数のメディアセグメント(46)に符号化された前記時間的に変化する空間シーン(30)の各時空間部分は、時間的に変化する空間シーン(30)が空間的に細分されるタイル(50)のそれぞれ1つにおける前記時間的に変化する空間シーン(30)の時間セグメント(54)である、請求項29に記載のメディアプレゼンテーション記述。
- 前記情報(64)は、前記さらなる品質と前記所定の品質との間の差の尺度についての許容値を示す、請求項28ないし30のいずれかに記載のメディアプレゼンテーション記述。
- 前記情報(68)は、前記ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値を示す、請求項31に記載のメディアプレゼンテーション記述。
- 前記情報は、前記ビューセクション(28)までの距離に応じた方法で、前記さらなる品質と前記所定の品質との間の差の測定に対する前記許容値をビューセクション(28)までのそれぞれの距離と、それぞれの距離を超える差を測定するための対応する許容値との対のペアリストにより示す、請求項31または32に記載のメディアプレゼンテーション記述。
- 前記情報(64)は、前記第2の部分が前記第1の部分と共にビューセクション内にあり得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項31ないし34のいずれかに記載のメディアプレゼンテーション記述。
- 前記情報(64)は、前記第2の部分が前記第1の部分と共にビューセクション内にあ
り得る最大で許容される時間間隔の指示と共に、前記追加品質と前記所定品質との間の差の尺度についての前記許容値を示す、請求項31ないし34のいずれかに記載のメディアプレゼンテーション記述。
- 前記情報(64)は、最初の部分と一緒にビューセクション内にある前記第2の部分が許容することができるさらなる最大許容時間間隔の指示とともに、前記さらなる品質と前記所定の品質との間の差の測定に関するさらなる許容値を示す、請求項35に記載のメディアプレゼンテーション記述。
- 前記情報(64)は時間的に変化および/または空間的に変化している、請求項31ないし36のいずれかに記載のメディアプレゼンテーション記述。
- 前記情報(64)は、前記さらなる品質および前記所定の品質に対して許容される同時設定のペアを示す、請求項31ないし37のいずれかに記載のメディアプレゼンテーション記述。
- 前記メディアプレゼンテーション記述は、ROIに関する情報を含む、請求項31ないし38のいずれかに記載のメディアプレゼンテーション記述。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするための装置であって、
サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択するように構成され、
前記装置は、
前記空間セクション(62)の第1の部分(64)が所定の品質で選択されたメディアセグメントに符号化され、前記第1の部分(64)と空間的に隣接し、時間的に変化する空間シーンの第2の部分(66; 72)が選択されたメディアセグメントに符号化さ
れていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化され、
前記第1の部分(64)は、前記時間的に変化する空間シーン(30)の時間的に変化するビュー部分(28)に続くような方法で、
選択されたメディアセグメントが少なくとも時間的に変化する空間シーン(30)の空間セクション(62)をその中に符号化するように選択を実行し、
前記選択されたメディアセグメントに含まれる情報(74)および/または前記サーバから得られる信号伝達に応じて、前記第1の部分(64)のサイズおよび/または位置を設定するように構成された装置。
- 前記情報(74)は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形でサイズを示す、請求項40に記載の装置。
- 前記情報(74)は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項40または41に記載の装置。
- 測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および/または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および/または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および/または、
所定の値が適用可能であるビューセクションの動きを制御する1つまたは複数の種類のユーザ入力を示すヒントとともに、
前記情報(74)は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項42に記載の装置。
- ビューセクションdの空間速度の尺度に対する所定の値が大きいほど、サイズは大きいように設定を行うように構成されている、請求項42または43に記載の装置。
- 前記情報(74)は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項40または44に記載の装置。
- それぞれの移動方向についての可能性が高いほど、第1の部分がそれぞれの方向に延びているように設定を行うように構成されている、請求項45に記載の装置。
。
- 前記情報(74)は、時間変化および/または空間変化および/または方向変化の方法で前記所定の空間速度を示す、請求項40または46に記載の装置。
- 前記第1の部分(64)と前記空間部分(62)とが一致するように構成されている、請求項40または47に記載の装置。
- 前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン(30)の時空間部分のそれぞれは、時間的に変化する空間シーン(30)が空間的に細分されるタイル(50)のそれぞれの1つにおける前記時間的に変化する空間シーン(30)の時間セグメント(54)である、請求項40または48に記載の装置。
- 前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する1つで前記時間的に変化する空間シーンの関連する時空間部分をその中に符号化している、請求項49に記載の装置。
- 前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズとは無関係に前記サイズを設定するように構成される、請求項40に記載の装置。
- 前記情報は、前記時間変化するビューセクションの異なるサイズオプションに対する前
記サイズに対する異なる値を含み、前記装置は、前記時間変化するビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を使用する、請求項40に記載の装置。
- 前記情報はタイルの数でサイズを示す、請求項51または52に記載の装置。
- 時間的に変化する空間シーンに関するメディアコンテンツ用のストリーミングサーバであって、
装置による検索のために複数のメディアセグメントを利用可能にし、それによって、装置は、空間的セクションの第1の部分が所定の品質で選択されたメディアセグメントに符号化される方法で符号化された方法で、少なくとも時間的に変化する空間シーンの空間的セクションをその中に符号化する検索のためのメディアセグメントを選択でき、それに応じて、第1の部分と空間的に隣接する時間的に変化する空間シーンの第2の部分が前記選択されたメディアセグメントに符号化されないかあるいは所定の品質よりさらに低い品質で選択されたメディアセグメントに符号化され、その結果、前記第1の部分は前記時間的に変化する空間的シーンの時間的に変化するビューセクションに続き、かつ、
第1の部分のサイズおよび/または位置をメディアセグメント内に設定する方法および/または装置への信号伝達によって、情報を通知する、ように構成される、ストリーミングサーバ。
- メディアプレゼンテーション記述を定義する信号であって、
複数のメディアセグメントのアドレスを計算することに関する情報であって、その情報を使用する装置は、時間的に変化する空間シーンの少なくとも1つの空間セクションをそのように符号化した複数のメディアセグメントからメディアセグメントを選択し検索することができ、それによれば、空間セクションの第1の部分は所定の品質で選択されたメディアセグメントに符号化され、それに応じて、第1の部分に空間的に隣接する時間的に変化する空間シーンの第2の部分は選択されたメディアに符号化されない、あるいは、予め定められた品質と比べてさらに低い品質で選択されたメディアセグメントにセグメント化または符号化され、したがって第1の部分は時間的に変化する空間シーンの時間的に変化するビューセクションに続く情報と、
メディアセグメント内に、および/またはデバイスへの信号伝達によって、サイズおよび/または第1の部分のサイズを設定する方法に関する情報とを含む、
メディアプレゼンテーション記述を定義する信号。
- 前記情報(74)は、前記時間的に変化するビューセクションのサイズに対する増分またはそのスケーリングの形式でサイズを示す、請求項55に記載の信号。
- 前記情報(74)は、前記ビューセクションの空間速度の尺度についての所定の値を示す、請求項55または56に記載の信号。
- 測定された空間速度が所定の値を超えないユーザのデフォルトパーセンタイルについて、および/または、
測定された空間速度が所定の値を超えないユーザのパーセンタイルを示すパーセンタイル値と共に、および/または、
ビューセクションが所定の領域内にあるユーザのパーセンタイルを示すパーセンタイル値とともに、および/または、
所定の値が適用可能であるビューセクションの動きを制御する1つまたは複数の種類のユーザ入力を示すヒントと一緒に、
前記情報(74)は、前記ビューセクションの前記空間速度の尺度についての前記所定の値を示す、請求項57に記載の信号。
- ビューセクションdの空間速度の尺度に対する所定の値が大きいほど、サイズが大きいように設定を実行するように構成された、請求項57または58に記載の信号。
- 前記情報(74)は、前記ビューセクションの移動方向についての確率の尺度についての所定の値を示す、請求項55または59に記載の信号。
- それぞれの移動方向についての可能性が高いほど、第1の部分がそれぞれの方向に延びているように設定を行うように構成された、請求項60に記載の信号。
- 前記情報(74)は、時間変化および/または空間変化および/または方向変化する形で前記所定の空間速度を示す、請求項55または61のいずれかに記載の信号。
- 前記第1の部分(64)と前記空間部分(62)とが一致するように構成されている、請求項55または62のいずれかに記載の信号。
- 前記複数のメディアセグメントに符号化された前記時間的に変化する空間シーン(30)の前記時空間部分のそれぞれは、時間的に変化する空間シーン(30)が空間的に細分されているタイル(50)のそれぞれの1つにおいて前記時間的に変化する空間シーン(30)の時間セグメント(54)である、請求項55または63のいずれかに記載の信号。
- 前記複数のメディアセグメントの各メディアセグメントは、一組の品質レベルのうちの関連する1つのレベルで前記時間的に変化する空間シーンの関連する時空間部分に符号化している、請求項64に記載の信号。
- 前記装置は、前記情報に応じて前記時間的に変化するビューセクションのサイズから独立した方法で前記サイズに構成される、請求項55に記載の信号。
- 前記情報は、前記時間変化ビューセクションの異なるサイズオプションに対するサイズに対する異なる値を含み、前記装置は、前記時間変化ビューセクションの実際のサイズに適合するサイズオプションに関する情報に含まれる値を用いる、請求項55に記載の信号。
- 前記情報がタイルの数でサイズを示す、請求項65または66に記載の信号。
- ビデオを復号化するための復号化パワーがフォーカスされるべき前記ビデオ内の1つまたは複数のサイズの焦点領域の信号伝達、および前記ビデオの推奨される好ましいビューセクション領域を含むビデオビットストリームに符号化されるビデオを有するビデオビットストリーム。
- ビデオ内の焦点領域のサイズの信号伝達(74)をビデオビットストリームから導出し、
前記ビデオを復号化するための復号化パワーを前記焦点領域(116)に集中させるように構成された、前記ビデオビットストリームから前記ビデオをデコードするためのデコーダ。
- 前記焦点領域を排他的に復号するように構成されている、請求項70に記載のデコーダ。
- 前記フォーカス領域において前記ビデオの各ピクチャの復号を開始するように構成されている、請求項70に記載のデコーダ。
- 前記フォーカス領域を復号すると、前記ビデオの各ピクチャの復号を中止するように構成されている、請求項70に記載のデコーダ。
- 前記信号伝達は、前記サイズを絶対的に示すか、または前記デコーダは、前記信号伝達に含まれるパラメータによって前記焦点領域のサイズをスケーリングするように構成される、請求項70ないし73のいずれかに記載のデコーダ。
- 時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置(30)であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも1つのバージョンで、
少なくとも1つのバージョンのそれぞれについて、時間的に変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを
メディアプレゼンテーションの説明から導出し(90)、
タイルベースのストリーミングに関して、少なくとも1つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる(92)ように構成されている、装置。
- 請求項75に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は復号化能力に関係する装置。
- 請求項75または76に記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、いくつかの利用可能なデコーダに関する装置。
- 請求項75から77のいずれかに記載の装置であって、前記恩恵を受ける要件および前記装置の能力は、レベルおよび/またはプロファイル記述子に関係する装置。
- 前記恩恵を受ける要件および前記装置の能力は、前記時間的に変化する空間シーン(30)にわたってビューセクションを移動させるための入力装置のタイプに関連する、または前記ビューセクションは入力装置を使用して前記時間的に変化する空間シーン(30)にわたって移動するスピードに関連する請求項75ないし78のいずれかに記載の装置。
- 前記装置は、
メディアプレゼンテーション記述に含まれる計算規則を使用して、選択されたメディアセグメントのアドレスを計算することによって、サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択し、
計算されたアドレスを使用してサーバ(20)から選択されたメディアセグメントを検索し、
装置は、選択されたメディアセグメントが、時間的に変化する空間シーン(30)の少なくとも1つの空間セクション(62)をその中に符号化したものを有するように選択を実行するように構成されており、
それによれば、空間セクション(62)の第1の部分(64)が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第2の部分(66; 72)が第1の部分(64)に空間的に隣接し、選択されたメディアセグ
メントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第1の部分(64)が時間的に変化する空間シーン(30)の時間的に変化するビュー部分(28)に続くようにする、請求項75ないし79のいずれかに記載の装置。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするためのストリーミングサーバであって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも1つのバージョンで、
少なくとも1つのバージョンのそれぞれについて、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示が、
導出でき、これにより、装置が、ストリーミングサーバからメディアコンテンツをストリーミングすることが可能となる、
メディアプレゼンテーション記述を提供し(90)、
タイルベースのストリーミングに関して、少なくとも1つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる(92)ように構成されたストリーミングサーバ。
- 時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも1つのバージョンに関する情報と、
少なくとも1つのバージョンのそれぞれに対して、時間的に変化する空間シーンの前記
それぞれのバージョンを前記タイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを含む、メディアプレゼンテーション記述。
- 前記恩恵を受ける要件と前記デバイス機能は復号化機能に関係する請求項82に記載のメディアプレゼンテーション記述。
- 前記恩恵を受ける要件および前記デバイス機能は、いくつかの利用可能なデコーダに関係する、請求項82または83に記載のメディアプレゼンテーション記述。
- 前記恩恵を受ける要件および前記デバイス機能は、レベル記述子および/またはプロファイル記述子に関係する、請求項82から84のいずれかに記載のメディアプレゼンテーション記述。
- 前記恩恵を受ける要件および前記デバイス機能は、時間的に変化する空間シーン(30)にわたってビューセクションを移動させるためのタイプの入力装置に関係する、または入力装置を使用して、ビューセクションが時間的に変化する空間シーン(30)にわたって移動する速度に関係する、請求項82に記載のメディアプレゼンテーション記述。
- 前記装置が、前記含まれる計算規則を使用して選択されたメディアセグメントのアドレスを計算することによって、前記サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択することを使用可能にするための計算規則をさらに含む、請求項82ないし86のいずれかに記載のメディアプレゼンテーション記述。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするための装置であって、
空間的ビューポート位置および少なくとも1つのパラメータに応じて、メディアセグメントのアドレスを計算し、メディアセグメントは時間的に変化する空間シーン(30)および少なくとも1つのパラメータを記述し、
計算されたアドレスを使用してメディアセグメントを取得する、
ように構成された装置。
- 前記少なくとも1つのパラメータは、視野中心および/または視野深度の1つまたは複数の座標を含む、請求項88に記載の装置。
- 空間ビューポート位置および少なくとも1つのパラメータに応じて、メディアセグメントのアドレスを計算するための計算規則と、時間的に変化する空間シーンを記述するメディアセグメント(30)と、計算されたアドレスを使用してメディアセグメントを検索するための少なくとも1つのパラメータとを含む、メディアプレゼンテーション記述。
- 請求項90に記載のメディアプレゼンテーション記述を提供するように構成された、サ
ーバから時間的に変化する空間シーン(30)に関係するメディアコンテンツをストリーミング配信することを装置が可能にするストリーミングサーバ。
- 時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための装置であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するように構成され、
前記装置は、時間的に変化する空間シーンの第1の部分を、第1の部分の空間的近傍と比較して、または第1の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法で向上した品質でそこに符号化し、
前記第1の部分の空間位置および/または移動を測定する瞬時測定値、および/または
前記第1の部分の空間位置および/または動きを測定する、時間平均などの統計値、および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および/または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット(300)の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および/または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値(42)および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および/または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第1の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第1の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および/または
前記ビューセクションによって覆われる視野、および/または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値(100)および/または
シーン中心(100)に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するように構成されている、装置。
- 前記選択されたメディアセグメントに符号化され、ビューセクション内に見える限りにおいて、前記第1の部分の品質または前記時間的に変化する空間シーンの品質が、低品質部分が高品質部分とともにビューセクションに表示される持続時間として測定される請求項92に記載の装置。
- 時間的に変化する空間シーンの第1の部分(64)が前記ビューセクション(28)を追加するように前記選択を実行するように構成されている、請求項92または93に記載の装置。
- 時間的に変化する空間シーンが選択されたメディアセグメントに符号化されるビューセクション(28)に入るピクセルの平均密度を測定する尺度
の1つとして選択されたメディアセグメントに符号化され、ビューセクションに表示される限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定値を記録する送信ログメッセージを設定する、請求項92ないし94のいずれかに記載の装置。
- 前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項95に記載の装置。
- 前記測定値は、前記選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に不均一な方法で前記ピクセル密度を平均することによって前記ピクセルの平均密度を測定するように構成される、請求項95に記載の装置。
- 選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して空間的に均一な方法でピクセル密度を平均化する、あるいは、
選択されたメディアセグメントに符号化されたピクチャのピクセルグリッドに関して、空間的に不均一な方法でピクセル密度を平均する
ことにより、前記送出ログメッセージが、前記測定値が平均画素密度を測定するかどうかを示すように構成されている、請求項95に記載の装置。
- 請求項97または98に記載の装置であって空間的に不均一な方法でピクセル密度を平均することは、
球状に均一な方法で平均化すること、あるいは
ビューセクション(28)の中央ビュー方向(312)に対して垂直であるビューポート平面(310)に関して空間的に均一に平均化すること、
に対応する装置。
- 測定値は、前記平均化を前記ビューセクション(28)の中央サブセクションに限定する方法でピクセルの密度を平均化することによってピクセルの平均密度を測定し、またはビューセクションのエッジ部分(204)と比較して中央サブセクションに、より高い平均重みを適用する(202)、請求項95ないし99のいずれかに記載の装置。
- 前記測定値が、それぞれ水平視野断面軸(204)および垂直視野断面軸(206)に沿って別々に平均ピクセル密度を測定するように構成されている、請求項95ないし100のいずれかに記載の装置。
- ログメッセージを断続的に送信するように構成されている、請求項95から101のいずれかに記載の装置。
- ログメッセージを、それに基づいて装置がダウンロードのための前記メディアセグメン
トの選択を実行するマニフェストファイルによって制御されるレートで送信するように構成されている、請求項95ないし102のいずれかに記載の装置。
- 前記サーバ上で利用可能な前記複数のメディアセグメントはそれぞれ、前記時間的に変化する空間シーンの複数の表現のうちの1つに属し、前記表現は、以下の1つまたは複数において異なり、
前記時間的に変化する空間シーンの中に符号化されているシーンセクション(50)、
前記時間的に変化する空間シーンがそこに符号化される品質
時間的に変動する空間的シーンがその中に符号化される空間的品質変動
但し、前記装置は、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述を、各バッファの1つ、または
前記スクリーンセクション
前記品質
前記空間品質分布
表現
の1つもしくは2つ以上への関連付けの形態でログするログメッセージを送信するように構成される、請求項95ないし103のいずれかに記載の装置。
- 前記表現は、以下のうちの1つまたは複数に従って適応セットに分類され、
時間的に変化する空間シーンのシーンセクションがその中に符号化され、
時間的に変動する空間シーンがその中に符号化される空間品質変動、
装置は、前記選択されたメディアセグメントを1組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの1つの適応セットへの関連付けの形で記録するあるいは前記選択されたメディアセグメントを1組のバッファに分配する際に適用された前記分配規則の前記記述を各バッファの1つの表現への関連付けの形で記録する送出ログメッセージを構成するように構成される、請求項95ないし104のいずれかに記載の装置。
- 前記装置は、時間的な測定の形で復号化(42)を受けるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値を記録するログメッセージを送信するように構成される、請求項95ないし105のいずれかに記載の装置。
- 前記装置は、選択されたメディアセグメントの量の測定が、メディアセグメント(58)の時間的長さおよび/またはミリ秒単位でよりも短い時間単位での時間測定の形でおよび/またはとは無関係に独立して定義される復号化(42)の対象となるために前記装置のバッファから出力されていないように構成される、請求項106に記載の装置。
- 前記装置は、以下の1つ以上で分類された形式で復号化(42)の対象となるために前記装置のバッファから出力されなかった選択されたメディアセグメントの量の測定値を記録するログメッセージを送出するように構成される、請求項95ないし107のいずれかに記載の装置。
それぞれのメディアセグメントがバッファリングされている前記デコーダのバッファ、
前記それぞれのメディアセグメントに符号化されたシーンセクション、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される品質、
前記時間的に変化する空間シーンがそれぞれのメディアセグメントに符号化される空間品質分布。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするための方法であって、
サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択する(56)工程と、
サーバ(20)から前記選択されたメディアセグメントを検索し(60)、前記選択されたメディアセグメントが以下に従って符号化された時間的に変化する空間シーン(30)の空間セクション(62)を少なくとも有するように実行され、空間セクションの第1の部分(64)は所定の品質で選択されたメディアセグメントに符号化され、それに従って、時間的に変化する空間シーンの第2の部分(66)は空間的に第1の部分(64)に隣接し、所定の品質に関して所定の関係を満たすさらなる品質で、選択されたメディアセグメントに符号化され、
前記方法は、前記選択されたメディアセグメントに含まれる情報(68)および/または前記サーバ(20)から取得された信号伝達から前記所定の関係を導出することをさらに含む、方法。
- 時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第1の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でかつそれによれば、時間的に変化する空間シーンのうち、第1の部分に空間的に隣接する第2の部分が、さらなる品質で選択されたメディアセグメントに符号化される符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにするステップと、
メディアセグメント内の、さらなる品質によって満たされることになっている所定の関係に関する情報をシグナリングする、および/または装置への信号伝達によるステップとを含む、方法。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングする方法であって、
サーバ(20)上で利用可能な複数(46)のメディアセグメント(58)からメディアセグメントを選択するステップと、
選択されたメディアセグメントが、
それによれば、空間セクション(62)の第1の部分(64)が所定の品質で選択されたメディアセグメントに符号化され、それに従って時間的に変化する空間シーンの第2の部分(66; 72)が空間的に隣接し、第1の部分(64)は、選択されたメディア
セグメントに符号化されていないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されており、かつ、
第1の部分(64)は、時間的に変化する空間シーン(30)の時間的に変化するビュー部分(28)に続く、
ように、時間的に変化する空間シーン(30)の少なくとも1つの空間セクション(62)をその中に符号化して有するように選択が実行され、前記選択されたメディアセグメントを前記サーバ(20)から取出すステップとを含み、
方法は、選択されたメディアセグメントに含まれる情報(74)および/またはサーバから取得された信号伝達に応じて第1の部分(64)のサイズを設定することをさらに含
む、方法。
- 時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
装置による検索のために複数のメディアセグメントを利用可能にレンダリングし、それによって空間的セクションの第1の部分が所定の品質で選択されたメディアセグメントに符号化されるような方法でおよび前記第1の部分に空間的に隣接する時間的に変化する空間シーンの第2の部分は、選択されたメディアセグメントに符号化されないか、または所定の品質に対してさらに低い品質で選択されたメディアセグメントに符号化されるような方法で符号化された時間的に変化する空間的シーンの少なくとも空間的セクションを有する検索用メディアセグメントを装置が選択できるようにし、その結果、第1の部分は、時間的に変化する空間シーンの時間的に変化するビューセクションに従うステップと、
前記メディアセグメント内、および/または前記装置への信号伝達によって前記第1の部分のサイズをどのように設定するかに関する情報を信号伝達するステップとを含む、方法。
- ビデオビットストリームからビデオを復号するための方法であって、
ビデオビットストリームからビデオ内の焦点領域のサイズのシグナリングを導出するステップと、
前記ビデオをデコードするためのデコード能力を前記焦点領域に集中させるステップとを含む方法。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするためにデバイスによって実行される方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも1つのバージョンと、
少なくとも1つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示とを、
メディアプレゼンテーション記述から導出するステップと、
タイルベースのストリーミングに関して、少なくとも1つのバージョンの恩恵を受ける要件を、デバイスまたはデバイスと対話する別のデバイスのデバイス機能と一致させる(92)ステップとを含む、方法。
- 時間的に変化する空間シーンに関するメディアコンテンツをストリーミングするための方法であって、
サーバ上で利用可能な複数のメディアセグメントからメディアセグメントを選択するステップと、
前記サーバから前記選択されたメディアコンテンツを検索し、選択されたメディアセグメントが、第1の部分の空間的近傍と比較して向上した品質でまたは第1の部分の空間的近傍が選択されたメディアセグメントに符号化されないような方法でその中に符号化される時間的に変化する空間シーンの第1の部分を有するように選択を実行するステップとを含み、
前記方法は、
前記第1の部分の空間位置および/または移動を測定する瞬時測定値、および/または
前記第1の部分の空間位置および/または動きを測定する、時間平均などの統計値、および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する瞬間測定、および/または
選択されたメディアセグメントをバッファリングすることに関与するデバイスのバッファのセット(300)の表示、選択されたメディアセグメントをバッファのセットに分配する際に適用される分配規則の記述、およびバッファの各セットの瞬間的なバッファ充満および/または
復号化の対象となるために前記装置のバッファから出力されていない選択されたメディアセグメントの量の測定値(42)および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、時間的に変化する空間シーンの品質を測定する時間的平均などの統計値、および/または
選択されたメディアセグメントに符号化され、ビューセクションで見える限りにおいて、第1の部分の品質または時間的に変化する空間シーンの品質を測定する瞬間的な測定値、および/または
選択されたメディアセグメントに符号化され、ビューセクションに見える限りにおいて、第1の部分の品質または時間的に変化する空間シーンの品質を測定する、時間平均などの統計値、および/または
前記視野セクションによって覆われる視野、および/または
シーン中心に対するユーザ位置またはビュー深度を測定する瞬間測定値(100)および/または
シーン中心(100)に対するユーザ位置またはビュー深度を測定する、時間平均などの統計値
を記録するログメッセージを送出するステップをさらに含む、方法。
- 時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミングするための方法であって、
時間的に変化する空間シーンがタイルベースのストリーミングのために提供される少なくとも1つのバージョンと、
少なくとも1つのバージョンのそれぞれに対して、時間ベースで変化する空間シーンのそれぞれのバージョンをタイルベースのストリーミングから恩恵を受けるための恩恵を受ける要件の表示と、
導出可能であり、これにより装置がメディアコンテンツをストリーミングサーバからストリーミング可能である
メディアプレゼンテーション記述(90)を提供するステップと、
タイルベースのストリーミングに関して、タイルベースのストリーミングに関して、少なくとも1つのバージョンの恩恵を受ける要件と、装置のデバイス機能または装置と対話する別の装置とを一致させる(92)ステップとを含む、方法。
- 請求項90に記載のメディアプレゼンテーション記述を提供することを含む、サーバから時間的に変化する空間シーン(30)に関するメディアコンテンツをストリーミング配信することを装置に可能にするための方法。
- プログラムがコンピュータ上で実行されるとき、請求項109ないし117のいずれかに記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。
Priority Applications (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022162676A JP7460722B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162683A JP7436598B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162685A JP7436599B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162678A JP2023011616A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162693A JP7464674B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162691A JP7405931B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162688A JP7464673B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162692A JP2023011621A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162680A JP2023011617A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP16193601 | 2016-10-12 | ||
EP16193601.8 | 2016-10-12 | ||
EP17180403.2 | 2017-07-08 | ||
EP17180403 | 2017-07-08 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019520008A Division JP2019537338A (ja) | 2016-10-12 | 2017-10-11 | 空間的不均等ストリーミング |
Related Child Applications (9)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022162688A Division JP7464673B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162692A Division JP2023011621A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162685A Division JP7436599B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162680A Division JP2023011617A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162683A Division JP7436598B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162678A Division JP2023011616A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162693A Division JP7464674B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162676A Division JP7460722B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162691A Division JP7405931B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021093746A true JP2021093746A (ja) | 2021-06-17 |
JP7157836B2 JP7157836B2 (ja) | 2022-10-20 |
Family
ID=60083314
Family Applications (11)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019520008A Pending JP2019537338A (ja) | 2016-10-12 | 2017-10-11 | 空間的不均等ストリーミング |
JP2021024317A Active JP7157836B2 (ja) | 2016-10-12 | 2021-02-18 | 空間的不均等ストリーミング |
JP2022162680A Pending JP2023011617A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162678A Pending JP2023011616A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162676A Active JP7460722B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162691A Active JP7405931B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162685A Active JP7436599B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162693A Active JP7464674B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162683A Active JP7436598B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162692A Pending JP2023011621A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162688A Active JP7464673B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019520008A Pending JP2019537338A (ja) | 2016-10-12 | 2017-10-11 | 空間的不均等ストリーミング |
Family Applications After (9)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022162680A Pending JP2023011617A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162678A Pending JP2023011616A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162676A Active JP7460722B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162691A Active JP7405931B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162685A Active JP7436599B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162693A Active JP7464674B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162683A Active JP7436598B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162692A Pending JP2023011621A (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
JP2022162688A Active JP7464673B2 (ja) | 2016-10-12 | 2022-10-07 | 空間的不均等ストリーミング |
Country Status (7)
Country | Link |
---|---|
US (11) | US11218530B2 (ja) |
JP (11) | JP2019537338A (ja) |
KR (10) | KR102433821B1 (ja) |
CN (11) | CN114928735B (ja) |
MX (11) | MX2022004792A (ja) |
TW (4) | TWI810763B (ja) |
WO (1) | WO2018069412A1 (ja) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3510744B1 (en) | 2016-09-09 | 2022-05-04 | Vid Scale, Inc. | Methods and apparatus to reduce latency for 360-degree viewport adaptive streaming |
WO2018069412A1 (en) | 2016-10-12 | 2018-04-19 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Spatially unequal streaming |
US11166072B2 (en) | 2017-03-23 | 2021-11-02 | Vid Scale, Inc. | Metrics and messages to improve experience for 360-degree adaptive streaming |
EP3769539A1 (en) * | 2018-03-22 | 2021-01-27 | Vid Scale, Inc. | Viewport dependent video streaming events |
US11917127B2 (en) * | 2018-05-25 | 2024-02-27 | Interdigital Madison Patent Holdings, Sas | Monitoring of video streaming events |
CN112673634A (zh) * | 2018-09-11 | 2021-04-16 | 深圳市大疆创新科技有限公司 | 用于支持渐进式视频比特流切换的系统和方法 |
US10779014B2 (en) | 2018-10-18 | 2020-09-15 | At&T Intellectual Property I, L.P. | Tile scheduler for viewport-adaptive panoramic video streaming |
EP3915269A1 (en) * | 2019-01-24 | 2021-12-01 | PCMS Holdings, Inc. | System and method for adaptive spatial content streaming with multiple levels of detail and degrees of freedom |
CN113966600A (zh) * | 2019-05-20 | 2022-01-21 | 弗劳恩霍夫应用研究促进协会 | 沉浸式媒体内容呈现和交互式360°视频通信 |
US11831861B2 (en) * | 2019-08-12 | 2023-11-28 | Intel Corporation | Methods for viewport-dependent adaptive streaming of point cloud content |
US10893218B1 (en) | 2019-09-20 | 2021-01-12 | Gopro, Inc. | Systems and methods for generating panoramic visual content |
US11765333B1 (en) * | 2020-12-16 | 2023-09-19 | Apple Inc. | Systems and methods for improved transitions in immersive media |
US11570417B2 (en) * | 2021-05-20 | 2023-01-31 | Apple Inc. | Immersive video streaming using view-adaptive prefetching and buffer control |
WO2023058258A1 (ja) * | 2021-10-05 | 2023-04-13 | ソニーグループ株式会社 | 画像処理システム、並びに、画像処理装置および方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015526006A (ja) * | 2012-06-29 | 2015-09-07 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | ビデオ・データストリーム・コンセプト |
WO2015197815A1 (en) * | 2014-06-27 | 2015-12-30 | Koninklijke Kpn N.V. | Determining a region of interest on the basis of a hevc-tiled video stream |
JP2019519981A (ja) * | 2016-05-19 | 2019-07-11 | クアルコム,インコーポレイテッド | 画像中の最上位関心領域 |
Family Cites Families (59)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2002351088A1 (en) * | 2001-12-04 | 2003-06-17 | Koninklijke Philips Electronics N.V. | Methods for multimedia content repurposing |
US8964830B2 (en) * | 2002-12-10 | 2015-02-24 | Ol2, Inc. | System and method for multi-stream video compression using multiple encoding formats |
US7856154B2 (en) * | 2005-01-19 | 2010-12-21 | The United States Of America As Represented By The Secretary Of The Army | System and method of super-resolution imaging from a sequence of translated and rotated low-resolution images |
CN2806473Y (zh) | 2005-03-28 | 2006-08-16 | 何业明 | 气化炉的净化催化装置 |
US20100017885A1 (en) * | 2005-07-01 | 2010-01-21 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Media markup identifier for alterable promotional segments |
KR101255226B1 (ko) * | 2005-09-26 | 2013-04-16 | 한국과학기술원 | 스케일러블 비디오 코딩에서 다중 roi 설정, 복원을위한 장치 및 방법 |
US20080043832A1 (en) * | 2006-08-16 | 2008-02-21 | Microsoft Corporation | Techniques for variable resolution encoding and decoding of digital video |
WO2008047258A2 (en) * | 2006-10-20 | 2008-04-24 | Nokia Corporation | System and method for implementing low-complexity multi-view video coding |
CN101803394A (zh) * | 2007-06-19 | 2010-08-11 | 韩国电子通信研究院 | 存储和播放立体数据的元数据结构以及使用该元数据存储立体内容文件的方法 |
KR100935388B1 (ko) | 2007-07-03 | 2010-01-06 | 동아공업 주식회사 | 낌방지 적층형 가스켓 |
DE102007043535A1 (de) * | 2007-09-12 | 2009-03-19 | Robert Bosch Gmbh | FMCW-Radarortungsvorrichtung und entsprechendes FMCW-Radarortungsverfahren |
CN101822064A (zh) | 2007-10-16 | 2010-09-01 | 汤姆逊许可公司 | 用于几何分割超级块的视频编码和解码的方法和设备 |
CN102056015B (zh) * | 2009-11-04 | 2012-12-05 | 沈阳迅景科技有限公司 | 一种全景虚拟现实漫游中的流媒体应用方法 |
US8997160B2 (en) * | 2010-12-06 | 2015-03-31 | Netflix, Inc. | Variable bit video streams for adaptive streaming |
US9282321B2 (en) * | 2011-02-17 | 2016-03-08 | Legend3D, Inc. | 3D model multi-reviewer system |
US9049464B2 (en) | 2011-06-07 | 2015-06-02 | Qualcomm Incorporated | Multiple description coding with plural combined diversity |
US9591593B2 (en) * | 2011-07-22 | 2017-03-07 | Qualcomm Incorporated | Systems, methods and apparatus for radio uplink power control |
CA2806473C (en) * | 2011-08-10 | 2016-11-29 | General Instrument Corporation | Method and apparatus for streaming media content using variable duration media segments |
RU2589341C2 (ru) * | 2011-11-08 | 2016-07-10 | Телефонактиеболагет Л М Эрикссон (Пабл) | Размер элемента мозаичного изображения при кодировании видео |
EP2805523B1 (en) * | 2012-01-19 | 2019-03-27 | VID SCALE, Inc. | Methods and systems for video delivery supporting adaption to viewing conditions |
US9736476B2 (en) * | 2012-04-27 | 2017-08-15 | Qualcomm Incorporated | Full random access from clean random access pictures in video coding |
JP6141971B2 (ja) | 2012-06-05 | 2017-06-07 | エルジー エレクトロニクス インコーポレイティド | 3d放送サービスのための放送信号処理方法及び装置 |
WO2014004905A1 (en) | 2012-06-27 | 2014-01-03 | Ryan Boucher | Devices, methods and systems for acquiring medical diagnostic information and provision of telehealth services |
WO2014011848A2 (en) * | 2012-07-12 | 2014-01-16 | Huawei Technologies Co., Ltd. | Signaling and processing content with variable bitrates for adaptive streaming |
US9253524B2 (en) * | 2012-07-20 | 2016-02-02 | Intel Corporation | Selective post-processing of decoded video frames based on focus point determination |
US9161039B2 (en) * | 2012-09-24 | 2015-10-13 | Qualcomm Incorporated | Bitstream properties in video coding |
EP3657806A1 (en) | 2012-10-12 | 2020-05-27 | Canon Kabushiki Kaisha | Method and corresponding device for streaming video data |
KR102270844B1 (ko) * | 2012-12-28 | 2021-06-30 | 한국전자통신연구원 | 영상의 부호화/복호화 방법 및 이를 이용하는 장치 |
CN103092696A (zh) * | 2012-12-29 | 2013-05-08 | 深圳先进技术研究院 | 三维空间数据预调度方法及其系统 |
EP2896189B1 (en) * | 2013-01-16 | 2016-09-14 | Huawei Technologies Co., Ltd. | Storing and transmitting content for downloading and streaming |
CN109618235B (zh) * | 2013-01-18 | 2021-03-16 | 佳能株式会社 | 生成设备和方法、处理设备和方法以及存储介质 |
GB2509954B (en) * | 2013-01-18 | 2016-03-23 | Canon Kk | Method of displaying a region of interest in a video stream |
CN105075273B (zh) * | 2013-02-27 | 2019-03-26 | 苹果公司 | 自适应流式传输技术 |
GB2512310A (en) * | 2013-03-25 | 2014-10-01 | Sony Corp | Media Distribution |
GB2513140B (en) * | 2013-04-16 | 2016-05-04 | Canon Kk | Methods, devices, and computer programs for streaming partitioned timed media data |
WO2014172654A1 (en) * | 2013-04-19 | 2014-10-23 | Huawei Technologies Co., Ltd. | Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol |
DE102013211571B4 (de) * | 2013-06-19 | 2016-02-11 | Opticom Dipl.-Ing. Michael Keyhl Gmbh | Konzept zur bestimmung der qualität eines mediadatenstroms mit variierender qualität-zu-bitrate |
EP3562170A1 (en) * | 2013-07-29 | 2019-10-30 | Koninklijke KPN N.V. | Providing tile video streams to a client |
KR102016551B1 (ko) * | 2014-01-24 | 2019-09-02 | 한화디펜스 주식회사 | 위치 추정 장치 및 방법 |
US20150237351A1 (en) * | 2014-02-18 | 2015-08-20 | Penne Lee | Techniques for inclusion of region of interest indications in compressed video data |
US9699437B2 (en) * | 2014-03-03 | 2017-07-04 | Nextvr Inc. | Methods and apparatus for streaming content |
WO2015131934A1 (en) * | 2014-03-05 | 2015-09-11 | 2Kb Beteiligungs Gmbh | System and method for live video streaming |
US20150346812A1 (en) * | 2014-05-29 | 2015-12-03 | Nextvr Inc. | Methods and apparatus for receiving content and/or playing back content |
US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
US20160027772A1 (en) * | 2014-07-22 | 2016-01-28 | Mediatek Inc. | Integrated capacitor in an integrated circuit |
US20160277772A1 (en) * | 2014-09-30 | 2016-09-22 | Telefonaktiebolaget L M Ericsson (Publ) | Reduced bit rate immersive video |
US9918094B2 (en) * | 2014-10-20 | 2018-03-13 | Google Llc | Compressing and representing multi-view video |
US10498976B2 (en) * | 2014-12-05 | 2019-12-03 | Microsoft Technology Licensing, Llc | Virtual focus feedback |
US20160182594A1 (en) * | 2014-12-19 | 2016-06-23 | Cable Television Laboratories, Inc. | Adaptive streaming |
US10104415B2 (en) | 2015-01-21 | 2018-10-16 | Microsoft Technology Licensing, Llc | Shared scene mesh data synchronisation |
US20170061700A1 (en) | 2015-02-13 | 2017-03-02 | Julian Michael Urbach | Intercommunication between a head mounted display and a real world object |
CN104735464A (zh) * | 2015-03-31 | 2015-06-24 | 华为技术有限公司 | 一种全景视频交互传输方法、服务器和客户端 |
US10674185B2 (en) * | 2015-10-08 | 2020-06-02 | Koninklijke Kpn N.V. | Enhancing a region of interest in video frames of a video stream |
GB2543320B (en) * | 2015-10-14 | 2020-05-13 | Sony Interactive Entertainment Inc | Head-mountable display system |
US10593028B2 (en) * | 2015-12-03 | 2020-03-17 | Samsung Electronics Co., Ltd. | Method and apparatus for view-dependent tone mapping of virtual reality images |
GB2550589B (en) * | 2016-05-23 | 2019-12-04 | Canon Kk | Method, device, and computer program for improving streaming of virtual reality media content |
KR102358757B1 (ko) | 2016-08-25 | 2022-02-07 | 엘지전자 주식회사 | 전방향 비디오를 전송하는 방법, 전방향 비디오를 수신하는 방법, 전방향 비디오 전송 장치, 전방향 비디오 수신 장치 |
US11172005B2 (en) | 2016-09-09 | 2021-11-09 | Nokia Technologies Oy | Method and apparatus for controlled observation point and orientation selection audiovisual content |
WO2018069412A1 (en) | 2016-10-12 | 2018-04-19 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Spatially unequal streaming |
-
2017
- 2017-10-11 WO PCT/EP2017/075971 patent/WO2018069412A1/en unknown
- 2017-10-11 MX MX2022004792A patent/MX2022004792A/es unknown
- 2017-10-11 MX MX2022004793A patent/MX2022004793A/es unknown
- 2017-10-11 CN CN202210671453.1A patent/CN114928735B/zh active Active
- 2017-10-11 CN CN202210671217.XA patent/CN115037917A/zh active Pending
- 2017-10-11 KR KR1020227023399A patent/KR102433821B1/ko active IP Right Grant
- 2017-10-11 CN CN202210671460.1A patent/CN114928736B/zh active Active
- 2017-10-11 MX MX2022004789A patent/MX2022004789A/es unknown
- 2017-10-11 CN CN202210671238.1A patent/CN115037918B/zh active Active
- 2017-10-11 CN CN202210671443.8A patent/CN115037920A/zh active Pending
- 2017-10-11 KR KR1020227022058A patent/KR102498840B1/ko active IP Right Grant
- 2017-10-11 KR KR1020227022200A patent/KR102498842B1/ko active IP Right Grant
- 2017-10-11 KR KR1020227023461A patent/KR102433822B1/ko active IP Right Grant
- 2017-10-11 MX MX2022004795A patent/MX2022004795A/es unknown
- 2017-10-11 CN CN202210671445.7A patent/CN114928734B/zh active Active
- 2017-10-11 CN CN201780076761.7A patent/CN110089118B/zh active Active
- 2017-10-11 KR KR1020217031521A patent/KR102420290B1/ko active Application Filing
- 2017-10-11 CN CN202210671205.7A patent/CN115037916A/zh active Pending
- 2017-10-11 MX MX2019004221A patent/MX2019004221A/es unknown
- 2017-10-11 CN CN202210671441.9A patent/CN115037919B/zh active Active
- 2017-10-11 KR KR1020197013702A patent/KR102310040B1/ko active IP Right Grant
- 2017-10-11 MX MX2022004790A patent/MX2022004790A/es unknown
- 2017-10-11 KR KR1020227022665A patent/KR102560639B1/ko active IP Right Grant
- 2017-10-11 MX MX2022004791A patent/MX2022004791A/es unknown
- 2017-10-11 KR KR1020227023362A patent/KR102511319B1/ko active IP Right Grant
- 2017-10-11 KR KR1020227023517A patent/KR102511320B1/ko active IP Right Grant
- 2017-10-11 CN CN202210671240.9A patent/CN114928733B/zh active Active
- 2017-10-11 CN CN202210671497.4A patent/CN114928737B/zh active Active
- 2017-10-11 MX MX2022004788A patent/MX2022004788A/es unknown
- 2017-10-11 MX MX2022004787A patent/MX2022004787A/es unknown
- 2017-10-11 JP JP2019520008A patent/JP2019537338A/ja active Pending
- 2017-10-11 KR KR1020227023308A patent/KR102433820B1/ko active IP Right Grant
- 2017-10-12 TW TW110148591A patent/TWI810763B/zh active
- 2017-10-12 TW TW106134928A patent/TWI664857B/zh active
- 2017-10-12 TW TW112124225A patent/TW202408246A/zh unknown
- 2017-10-12 TW TW108118409A patent/TWI753263B/zh active
-
2019
- 2019-04-11 US US16/381,912 patent/US11218530B2/en active Active
- 2019-04-11 MX MX2022007809A patent/MX2022007809A/es unknown
- 2019-04-11 MX MX2022004801A patent/MX2022004801A/es unknown
-
2020
- 2020-03-16 US US16/819,957 patent/US11283850B2/en active Active
-
2021
- 2021-02-18 JP JP2021024317A patent/JP7157836B2/ja active Active
- 2021-12-14 US US17/551,067 patent/US11496538B2/en active Active
-
2022
- 2022-02-10 US US17/669,271 patent/US11546404B2/en active Active
- 2022-02-10 US US17/650,586 patent/US11489900B2/en active Active
- 2022-02-10 US US17/669,256 patent/US11496541B2/en active Active
- 2022-02-10 US US17/669,260 patent/US11516273B2/en active Active
- 2022-02-10 US US17/669,240 patent/US11539778B2/en active Active
- 2022-02-10 US US17/669,248 patent/US11496540B2/en active Active
- 2022-02-10 US US17/669,226 patent/US11496539B2/en active Active
- 2022-09-27 US US17/935,824 patent/US20230093377A1/en active Pending
- 2022-10-07 JP JP2022162680A patent/JP2023011617A/ja active Pending
- 2022-10-07 JP JP2022162678A patent/JP2023011616A/ja active Pending
- 2022-10-07 JP JP2022162676A patent/JP7460722B2/ja active Active
- 2022-10-07 JP JP2022162691A patent/JP7405931B2/ja active Active
- 2022-10-07 JP JP2022162685A patent/JP7436599B2/ja active Active
- 2022-10-07 JP JP2022162693A patent/JP7464674B2/ja active Active
- 2022-10-07 JP JP2022162683A patent/JP7436598B2/ja active Active
- 2022-10-07 JP JP2022162692A patent/JP2023011621A/ja active Pending
- 2022-10-07 JP JP2022162688A patent/JP7464673B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015526006A (ja) * | 2012-06-29 | 2015-09-07 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | ビデオ・データストリーム・コンセプト |
WO2015197815A1 (en) * | 2014-06-27 | 2015-12-30 | Koninklijke Kpn N.V. | Determining a region of interest on the basis of a hevc-tiled video stream |
JP2019519981A (ja) * | 2016-05-19 | 2019-07-11 | クアルコム,インコーポレイテッド | 画像中の最上位関心領域 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7157836B2 (ja) | 空間的不均等ストリーミング | |
EP3526970A1 (en) | Spatially unequal streaming |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210322 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210322 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220323 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220624 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221007 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7157836 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |