JP2017092976A - タイルおよびタイル群を使用した関心領域ビデオ符号化 - Google Patents

タイルおよびタイル群を使用した関心領域ビデオ符号化 Download PDF

Info

Publication number
JP2017092976A
JP2017092976A JP2017004486A JP2017004486A JP2017092976A JP 2017092976 A JP2017092976 A JP 2017092976A JP 2017004486 A JP2017004486 A JP 2017004486A JP 2017004486 A JP2017004486 A JP 2017004486A JP 2017092976 A JP2017092976 A JP 2017092976A
Authority
JP
Japan
Prior art keywords
tile
tiles
image
tile group
roi
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2017004486A
Other languages
English (en)
Inventor
イエン イエ
Yan Ye
イエン イエ
ユーウェン ホー
yu-wen He
ユーウェン ホー
ホー ヨン
Yong He
ホー ヨン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Publication of JP2017092976A publication Critical patent/JP2017092976A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/162—User input
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167—Position within a video image, e.g. region of interest [ROI]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/55—Motion estimation with spatial constraints, e.g. at image or region borders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】高効率ビデオ符号化（ＨＥＶＣ）では、Ｈ．２６４／ＡＶＣと同じ主観的品質で２倍の圧縮率を実現することができる。ＨＥＶＣをモバイル空間において利用することにより、帯域幅の問題をある程度軽減することができる。【解決手段】タイルおよびタイル群を使用する、関心領域（ＲＯＩ）のビデオ符号化に関するシステム、方法、および手段が開示される。複数のタイルを含むエンコードされたビデオシーケンスが受信される。複数のタイルは、１つまたは複数のタイル群に分割される。１つまたは複数のタイル群のパラメータを示すシグナリングが受信される。１つまたは複数のタイル群の内のタイル群がデコードされて、デコードされたタイル群に関する画像が表示される。【選択図】図２Ｂ

Description

本発明は、タイルおよびタイル群を使用した関心領域ビデオ符号化のための、方法および装置に関する。
関連出願の相互参照
本願は、２０１２年９月１８日に提出された米国特許仮出願第６１／７０２，６７６号の利益を主張するものであり、その開示は全体が参照により本明細書に組み込まれる。
高効率ビデオ符号化（ＨＥＶＣ）では、Ｈ．２６４／ＡＶＣと同じ主観的品質で２倍の圧縮率を実現することができる。スマートフォンやタブレットの爆発的な成長に伴い、モバイル映像アプリケーション、例えば、ビデオストリーミング、ビデオチャット、ビデオ共有、およびゲームなどに限定されるものではないが、人々の日常生活の一部となっている。モバイル機器上のビデオトラフィックの爆発的な成長により、無線ネットワークのインフラストラクチャに対する需要が著しいものとなり、４Ｇモバイルネットワークの実装までも求められている。ＨＥＶＣをモバイル空間において利用することにより、帯域幅の問題をある程度軽減することができる。超高解像度テレビ（Ｕ−ＨＤＶＣ）の利用は、ＨＥＶＣ市場の導入にとっての原動力となる。
ＨＥＶＣは、多数の符号化ツール、例えば、向上した符号化効率のための、拡張ビデオブロックサイズ（例えば、最大６４×６４）、拡大変換サイズ（例えば、最大３２×３２）、高度動きベクトル予測（ＡＭＶＰ）、および、サンプル適応オフセット（ＳＡＯ）などを含むが、これらに限定されるものではない。ＨＥＶＣは、スライス構造に加えて、並列化のためのサポートを提供することができ、例えば、ウェーブフロントパラレルプロセシング（ＷＰＰ）およびタイルなどのツールを含むがこれらに限定されるものではない。ＷＰＰおよび／またはタイルを使用すると、１つの画像に相当するビデオビットストリームを、独立したビットストリームのデコード可能サブセットにパケット化するこができるが、スライスヘッダの追加的なオーバーヘッドを負うことはない。ＷＰＰおよびタイルでは、画像を領域に分割して、これらの領域を並行して同時にデコードすることができる。
本発明は、タイルおよびタイル群を使用した関心領域ビデオ符号化のための改善された、方法および装置を提供する。
タイルおよびタイル群を使用する、関心領域（ＲＯＩ）のビデオ符号化に関するシステム、方法、および手段が開示される。１つの画像が複数のタイルに分割されている、時間的に一連の画像を含む、エンコードされたビデオシーケンスが受信される。画像を表す全てのタイルがタイル群の要素であるとは限らないという条件で、複数のタイルは、少なくとも１つまたは複数のタイル群に分割される。少なくとも１つまたは複数のタイル群のパラメータを示すシグナリングが受信される。タイル群がデコードされて、デコードされたタイル群に関する画像が表示される。ＲＯＩ内のタイル群のみがデコードされる。少なくとも１つまたは複数のタイル群のパラメータには、タイル群の数、各タイル群内のタイルの数、および各タイルのインデックスが含まれる。少なくとも１つまたは複数のタイル群のパラメータは、ピクチャパラメータセット（ＰＰＳ）、ビデオユーザビリティ情報（ＶＵＩ）、または、補足エンハンスメント情報（ＳＥＩ）メッセージでシグナリングされてよい。タイル群内の全ての画素が、その参照画像内の同じタイル群内の画素から時間的に予測されるように、タイル群が制約を受けるようにしてよい。
関心領域（ＲＯＩ）を示すシグナリングがビデオデコーダにより受信され、または、ＲＯＩが判定される。ＲＯＩは、送信機側または受信機側のどちらかが判定することができ、または、送信機側と受信機側との間で取り決められてよい。ビットストリームでのシグナリングは、送信機側がＲＯＩを判定または取り決める場合に必要となる。例えば、コンテンツプロバイダは、１つまたは複数の関心領域を識別することができ、これらのＲＯＩの表現（超時間的な空間的定義）をビットストリームそのものに符号化することができる（例えば、ＲＯＩは、画像の左上端に対するＲＯＩの頂点の画素の座標によって示すことができる）。デコーダ側では、利用可能なＲＯＩが、エンドユーザに対してユーザインターフェースで示され、エンドユーザは、その領域のみを閲覧するためにＲＯＩを選択することができる。ＲＯＩ情報は、ビットストリームの外側で送信される。別の例において、表示されるビデオコンテンツ内の関心領域をエンドユーザが識別することができる、ユーザインターフェースが提供され、装置がズームしてＲＯＩを表示し、そのようなズームにより、ビデオコンテンツの他のエリアが表示から取り除かれる。ＲＯＩは、表示された画像に相当し、表示された画像は、エンコードされたビデオシーケンスの一部である。エンコードされたビデオシーケンス全体がデコードされるわけではなく、表示された画像のみ、または、表示された画像に重なるタイル群がデコードされる。
画像を水平次元および垂直次元でタイルに均等に分割する一例を説明する図である。 ４タイルの内の２つに制約されたＲＯＩの一例を説明する図である。 タイムインスタンス（Ｔ＋ｌ）ではＲＯＩの内側にあるが、タイムインスタンス（Ｔ）ではＲＯＩの外側にあるブロックの一例を説明する図である。 １画像分のタイルを１つ以上のタイル群にグループ化する一例を説明する図である。 １画像分のタイルの一部を１つのタイル群にグループ化する一例であって、タイルの別の部分はそのタイル群に属さない、一例を説明する図である。 タイル群内のブロックの動き予測に関する制約の一例を説明する図である。 タイル群内のブロックの動き予測に関する制約の一例であって、タイル群（およびタイル）の形が変化しても行われる、一例を説明する図である。 タイル群内のブロックの動き予測に関する制約の一例であって、タイルの形が変化して、かつ、タイル群が追加されても行われる、一例を説明する図である。 １つまたは複数の開示される実施形態を実装することができる、一例の通信システムのシステム図である。 図８Ａに示す通信システムにおいて使用することができる、一例の無線送受信装置（ＷＴＲＵ）のシステム図である。 図８Ａに示す通信システムにおいて使用することができる、一例の無線アクセスネットワークおよび一例のコアネットワークのシステム図である。 図８Ａに示す通信システムにおいて使用することができる、別の例の無線アクセスネットワークおよび別の例のコアネットワークのシステム図である。 図８Ａに示す通信システムにおいて使用することができる、別の例の無線アクセスネットワークおよび別の例のコアネットワークのシステム図である。
関心領域（ＲＯＩ）とは、上述したように、ビデオシーケンス内の１画像の一部を指し、画像全体ではない。ＲＯＩ符号化は、モバイル映像アプリケーションに利用することができる。例えば、モバイル機器は画面サイズが制限されているため、人々は、例えば、タッチスクリーンを使用して関心のエリアに触れることによって、ポインタ機器を使用して関心のエリアの周囲に線を引くまたは囲むことによって、または、何らかの他の手段によって、映像の特定のエリアを見ながらズームインする。ビデオコンテンツは、モバイル使用とは別の目的（例えば、テレビ放送）のために制作されてよい。そのようなコンテンツは、例えば、ビデオストリーミング（例えば、ＹｏｕＴｕｂｅ（登録商標）、Ｈｕｌｕ（登録商標）、Ａｍａｚｏｎ（登録商標）、Ｎｅｔｆｌｉｘ（登録商標）など）に限定されるものではないがモバイルアプリケーションを「再度の目的」としてよい。自動的な映像のリサイズおよびリターゲットを利用することができる。本明細書に記載される実装では、タイルを利用して、デコードの複雑性が削減されたＲＯＩビデオ符号化を提供することができる。
タイルをＨＥＶＣによりサポートすることができる。タイルは、画像を特定のサイズの矩形領域に分割したものとすることができる。図１は、画像１００を水平次元および垂直次元で、タイル１０２ａ、１０２ｂ、１０２ｃ、１０２ｄ、１０２ｅ、１０２ｆ、１０２ｇ、１０２ｈ、１０２ｉに均等に分割する一例を説明する図である。表１は、ピクチャパラメータセット（ＰＰＳ）（例えば、ＨＥＶＣ）でのタイルの構文構造の一例を示す。ｔｉｌｅｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇをオンにすると、各次元でのタイルの数がシグナリングされる。タイルが均一の大きさ（例えば、ｕｎｉｆｏｒｍ＿ｓｐａｃｉｎｇ＿ｆｌａｇが１）である場合、追加の情報はシグナリングされない。タイルの幅と高さがシグナリングされてよい。例えば、図１に示すように、ｎｕｍ＿ｔｉｌｅ＿ｃｏｌｕｍｎｓ＿ｍｉｎｕｓ１およびｎｕｍ＿ｔｉｌｅ＿ｒｏｗｓ＿ｍｉｎｕｓ１を２とし、ｕｎｉｆｏｒｍ＿ｓｐａｃｉｎｇ＿ｆｌａｇを１とすることができる。追加的なフラグであるｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｔｉｌｅｓ＿ｅｌａｂｌｅｄ＿ｆｌａｇを使用して、デブロッキングフィルタが、タイルの境界線を越えて適用されるかどうかを示すことができる（例えば、デブロッキングフィルタを利用して、境界線に沿って視覚的な非連続性を軽減することができる）。
エンコーダは、エンコーダが新しいＰＰＳを新しいタイル分割パラメータ（表１）を用いてシグナリングすることによって、画像から画像へタイルをどのように分割するのかを変更することができる。一例において、タイルはお互いに等しい大きさである必要はなく、また、先のインスタンスでのタイルと同じ大きさである必要もなく、ＲＯＩが１画像内を２つのタイムインスタンス間で移動する場合、エンコーダが、新しいＰＰＳを第２のタイムインスタンスにて新しいタイル分割パラメータを用いてシグナリングして、ＲＯＩがその現在の１つまたは複数のタイル内にあるままであるようにすることができる。タイル群の構成要素が静的である場合、エンコーダは、いずれの新しいタイル群パラメータもシグナリングしないでよい。
図２Ａは、ビデオシーケンス内の画像２００を、タイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄに分割（かつ符号化）した一例を説明する図である。ＲＯＩ２０４は、２つのタイル２０２ａ、２０２ｃ内に含まれる。ＲＯＩ２０４が重なるタイル２０２ａ、２０２ｃはＲＯＩをカバーする、と言うことができる。タイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄは、独立してデコードされてよい。画像２００がデコードされているとき、ＲＯＩ２０４が重なるタイル（例えば、２つのタイル２０２ａ、２０２ｃ）をデコードすることは、画像のＲＯＩを画面上に表示するのに十分である。
タイル（例えば、タイル２０２ａ、２０２ｃ）の一部分（例えば、１つの部分のみ）を、表示すべきＲＯＩ２０４に関してデコードする必要がある場合でも（例えば、画像２００が参照画像である場合）、画像２００内のタイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄの全てがデコードされてよい。ＨＥＶＣでは、時間的な予測を使用して、ビデオ信号に内在する時間的な冗長性を減少させることができる。画像内の全てのタイル（例えば、タイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄ）をデコードするので、画像２００を参照画像として使用して、後続の画像をデコード順序でデコードすることができる。
図２Ｂは、ビデオシーケンス内の画像２００を、タイムインスタンス（Ｔ）にてタイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄに分割（かつ符号化）した一例を説明する図である。ＲＯＩ２０４は、２つのタイル２０２ａ、２０２ｃ内に含まれる。ビデオブロック２０６（例えば、画素の郡）が、タイムインスタンス（Ｔ）にて、部分的にＲＯＩ２０４の外側にある。ブロック２０６は、タイムインスタンス（Ｔ）にて、タイル２０２ａ、２０２ｂを橋渡ししている。
タイムインスタンス（Ｔ＋ｌ）にてブロック２０６を予測することが望ましく、そうするために、タイムインスタンス（Ｔ）での画像２００を参照画像として使用して、タイムインスタンス（Ｔ＋ｌ）での画像２００を予測することができる。ＲＯＩは、静的のままであってよい。デコードされている画像（例えば、タイムインスタンス（Ｔ＋ｌ）での画像２００）と、１つまたは複数のその参照画像（例えば、タイムインスタンス（Ｔ）での画像２００）との間で、それぞれのタイル内において、動き推定が制限される制約が、ＨＥＶＣでは何もないため、タイムインスタンス（Ｔ）での参照画像内のタイル２０２ａ、２０２ｂ、２０２ｃ、２０２ｄの全てがデコードされていれば、タイムインスタンス（Ｔ＋ｌ）でのビデオブロック２０６を、タイムインスタンス（Ｔ）でのビデオブロック２０６から予測することができる。符号化順序は、表示順序と同じであってよく、または、ビデオシーケンス内の画像の符号化順序は、ビデオシーケンス内の画像の表示順序とは異なってもよい（例えば、階層Ｂ予測構造）。
本明細書に記載する実装は、エンコーダが動き推定中に制約を課すことで、動き補償予測が、ＲＯＩをカバーするタイルのサブセット（例えば、図２Ｂの例におけるタイル２０２ａ、２０２ｃ）内で確実に実行される、というものである。本明細書に記載する実装では、複雑性が削減されたＲＯＩデコーディングを円滑にすることができる。本明細書に記載する実装では、例えば、時間方向の一連の画像内のＲＯＩをカバーするタイルのサブセットを、デコーダにデコード（例えば、デコードのみ）させることによって、デコーディングの複雑性と消費電力を削減することができる。削減されたデコーディングは、後述するように、ＲＯＩをカバーするタイルのサブセットが同じである限り実行されてよい。この制約は、ビットストリームでシグナリングされて、フルデコーディング（例えば、タイルの全てをデコードする）ではなく、削減されたデコーディング（例えば、タイルのサブセットをデコードする）が実行されるということが、デコーダに通知される。
タイル群を利用することができる。タイルとは、画素ｐｅｌの集合体に関連し、その座標はタイルの境界線内、すなわち、ｂｏｕｎｄleft、ｂｏｕｎｄright、ｂｏｕｎｄtop、ｂｏｕｎｄbottom、の内側にある。例えば、Ｔ＝［ｐｅｌ｜ｃｏｏｒｄx（ｐｅｌ）∈［ｂｏｕｎｄleft，ｂｏｕｎｄright］かつｃｏｏｒｄy（ｐｅｌ）∈［ｂｏｕｎｄtop，ｂｏｕｎｄbottom］｝。
タイル群（ＴＧ）とは、ｎ個のタイルの組み合わせに関連し、ＴＧ＝｛Ｔ0，Ｔ1．．．Ｔn-1｝、ここで、Ｔj，ｉ＝０．．．ｎ−１は、画像内のタイルである。画素サンプルｐｅｌは、タイル群内のタイルに属するなら、タイル群ＴＧに属するということになる。タイル群は、動き補償予測がタイル群自身の境界線を超えない、という制約（本明細書で検討する）を満たす。例えば、画像内のタイル群ＴＧ内の画素ｐｅｌが、内部的に予測される場合、参照画像の内の１つまたは複数における同じタイル群内の参照画素から、予測（例えば、予測のみ）される。タイル群内の画素は、以下の制約を満たす。すなわち、参照画像内の参照画素ｐｅｌ＿ｒｅｆは、タイル群ＴＧに属さない場合、タイル群ＴＧに属する（現在の）画像内の画素サンプルｐｅｌ＿ｃｕｒの動き補償予測に使用されない。
図３は、ビデオシーケンス内の画像３００を、タイル３０２ａ、３０２ｂ、３０２ｃ、３０２ｄ、３０２ｅ、３０２ｆ、３０２ｇ、３０２ｈ、３０２ｉに分割（かつ符号化）して、これらのタイルをタイル群３０３、３０５にグループ化した一例を説明する図である。第１のタイル群３０３には、タイル３０２ａ、３０２ｂ、３０２ｄ、３０２ｅが含まれてよい。第２のタイル群３０５には、残りのタイル３０２ｃ、３０２ｆ、３０２ｇ、３０２ｈ、３０２ｉが含まれてよい。
図４は、ビデオシーケンス内の画像４００を、タイル４０２ａ、４０２ｂ、４０２ｃ、４０２ｄ、４０２ｅ、４０２ｆ、４０２ｇ、４０２ｈ、４０２ｉに分割（かつ符号化）して、いくつかのタイルのみがタイル群４０３に属する一例を説明する図である。例えば、タイル４０２ａ、４０２ｂ、４０２ｄ、４０２ｅが、タイル群４０３に属し、画像内の残りのタイル４０２ｃ、４０２ｆ、４０２ｇ、４０２ｈ、４０２ｉは、いずれのタイル群にも属さないものとする。残りのタイル４０２ｃ、４０２ｆ、４０２ｇ、４０２ｈ、４０２ｉでカバーされるエリア内の画素がどのように予測されるのか、に関する制約はないものとする。
図３および図４には図示しないが、１つのタイルが、１つ以上のタイル群に属してよい。例えば、図３の３０２ａが、３０３および３０５の両方に属す場合、すなわち、３０３＝｛３０２ａ，３０２ｂ，３０２ｄ，３０２ｅ｝および３０５＝｛３０２ａ，３０２ｃ，３０２ｆ，３０２ｇ，３０２ｈ，３０２ｉ｝である場合、３０２ａ内の画素は、３０３および３０５がカバーする共通エリア、３０３∩３０５、すなわち、３０２ａ自身、から動き補償予測されることになる。
図５は、ビデオシーケンス内の画像５００を、タイムインスタンス（Ｔ）にて、タイル（説明を簡単にするために描かれていない）に分割（かつ符号化）して、タイル群５０３、５０５にグループ化した一例を説明する図である。説明を簡単にするためにＲＯＩは、描かれていない。ＲＯＩは、タイル群５０３またはタイル群５０５で表すことができるが、実際には、ＲＯＩが重なるタイル群より、ＲＯＩが僅かに小さいことが有益である。例えば、タイル群５０３は、ＲＯＩの外側に小さな余白を追加的に含んでよいため、表１のｌｏｏｐ＿ｆｉｌｔｅｒ＿ａｃｒｏｓｓ＿ｔｉｌｅｓ＿ｅｎａｂｌｅｄ＿ｆｌａｇが１に設定されると、ループ内フィルタリング（例えば、デブロッキングフィルタ、ｓａｍｐｌｅ ａｄａｐｔｉｖｅ ｏｆｆｓｅｔなど）が、タイルの境界線に沿って、ＲＯＩの内側の画素値には影響を与えることなく、実行される。ビデオブロック５０６は、タイムインスタンス（Ｔ）にてタイル群５０３内にある。ビデオブロック５０８は、タイムインスタンス（Ｔ）にてタイル群５０５内にある。
タイムインスタンス（Ｔ＋１）にて、タイムインスタンス（Ｔ）での画像５００を参照画像として使用することによって、タイムインスタンス（Ｔ＋１）での画像５００内のブロック５０６、５０８を予測することが望ましい。タイル群５０３、５０５には、制約が課される。タイムインスタンス（Ｔ＋１）でのタイル群５０３内のビデオブロック５０６は、タイル群５０３の境界線内の全体に存在する参照ブロックから予測（例えば、予測のみ）されてよい。タイル群５０５内のタイムインスタンス（Ｔ＋１）でのビデオブロック５０８は、タイル群５０５の境界線内の全体に存在する参照ブロックから、予測（例えば、予測のみ）されてよい。「内の全体に存在する」とは、僅かな画素の動きベクトルに起因する動き補間を含む、動き補償予測に関与する画素が、任意の他のタイル群の境界線内には存在しない、ということを意味する。この制約は、異なるタイル群が、一時的なドメインにおいて独立してデコード可能であることを可能にする。ＲＯＩのデコーディングが削減されることが望ましい場合、第１のタイル群がＲＯＩをカバーするように定義し、第２のタイル群が画像の残りをカバーするようにまたはタイル群がカバーしないように、定義することができる。そのような構成により、デコーダは、時間的に一連の画像内の第１のタイル群をデコード（例えば、デコードのみ）することができ、および、ＲＯＩを表示することが可能となる。ＲＯＩがタイル群内の全体に存在するように、タイル群を定義することにより、デコーダは、そのタイル群の一連の時間的な画像をデコード（例えば、デコードのみ）してＲＯＩを表示することができる。１画像内のタイルは、アプリケーションの必要に応じて、例えば、２つ以上のＲＯＩが存在する場合、２つ以上のタイル群に分割されてよい。より多くのタイル群を有することは、異なるＲＯＩをサポートする可能性が大きくなるということである。２つのタイル群の要素であるタイルからの画素が、そのタイルから予測されるように、制約を修正してよい（上記参照）。
表１に示すように、タイルに関するパラメータは、ＨＥＶＣのＰＰＳでシグナリングされてよい。ビデオシーケンス内では、異なる画像に、異なるＰＰＳを使用することができる。タイルパラメータは、同じビデオシーケンス内の画像から画像へ変化する。ほとんどの映像アプリケーションにおいて、タイルの数およびタイルの配置場所が、ビデオシーケンス（例えば、一連の画像）内で同じままであることが多いが、タイルの構成を、同じビデオシーケンス内で画像から画像へ変更することができるだけでなく、タイルのグループ化を、画像ごとに変更することができる、という状況が生じ得る。
図６は、ビデオシーケンス内の画像６００を、タイムインスタンス（Ｔ）にて、タイル（説明を簡単にするために描かれていない）を分割（かつ符号化）して、タイル群６０３、６０５にグループ化した一例を説明する図である。説明を簡単にするためにＲＯＩは、描かれていない。ビデオブロック６０６は、タイムインスタンス（Ｔ）にてタイル群６０３内にある。ビデオブロック６０８は、タイムインスタンス（Ｔ）にてタイル群６０５内にある。
タイムインスタンス（Ｔ＋１）にて、タイムインスタンス（Ｔ）での画像６００を参照画像として使用することにより、画像６００内のブロック６０６、６０８を予測することが望ましい。
タイムインスタンス（Ｔ＋２）にて、タイル群６０３、６０５は、タイムインスタンス（Ｔ）およびタイムインスタンス（Ｔ＋１）での画像６００とは、例えば上下左右で、異なって分割されているが、ビデオブロック６０６が継続してタイル群６０３内の全体に存在し、また、ビデオブロック６０８が継続してタイル群６０５内の全体に存在する。本例は、同じシーケンス内の画像でタイルおよびタイル群の形が異なるが、それでもなお、上記で検討した動き予測の制約を満たし、すなわち、タイムインスタンス（Ｔ＋１）での画像６００を参照画像として使用することによって、タイムインスタンス（Ｔ＋２）での画像６００内のブロック６０６、６０８が予測される。ＰＰＳシグナルは、タイルおよびタイル群を定義するタイムインスタンス（Ｔ）より前に送られてよい。別のＰＰＳシグナルは、タイルおよびタイル群を定義するタイムインスタンス（Ｔ＋１）とタイムインスタンス（Ｔ＋２）との間に送られてよい。
図７は、ビデオシーケンス内の画像７００を、タイムインスタンス（Ｔ）にて、タイル（説明を簡単にするために点線で示す）に分割（および符号化）して、タイル群７０３にグループ化した一例を説明する図である。説明を簡単にするためにＲＯＩは、描かれていない。ビデオブロック７０６は、タイムインスタンス（Ｔ）にてタイル群７０３内にある。ビデオブロック７０８もまた、タイムインスタンス（Ｔ）にてタイル群７０３にある。
タイムインスタンス（Ｔ＋１）にて、タイムインスタンス（Ｔ）での画像７００を参照画像として使用することによって、画像７００内のブロック７０６、７０８を予測することができる。
タイムインスタンス（Ｔ＋２）にて、タイル群７０３は、タイムインスタンス（Ｔ）およびタイムインスタンス（Ｔ＋１）での画像７００とは異なって分割されており、新しいタイル群７０５が作成される。ビデオブロック７０６は、継続してタイル群７０３内の全体に存在する。ビデオブロック７０８は、ここでは、新しいタイル群７０５内に存在する。これは、異なるタイムインスタンスにて、異なる形のタイルおよびタイル群、異なる数のタイル群、を示す例である。本明細書に記載されるタイル群の制約は、タイムインスタンス（Ｔ＋２）、（Ｔ＋３）については、ビデオブロック７０６がタイムインスタンス（Ｔ）、（Ｔ＋１）でのタイル群７０３から予測される、というものである。タイル群７０３が、タイムインスタンス（Ｔ）、（Ｔ＋１）での画像全体をカバーするため、動き補償予測についての制限が少ない（例えば、何らかの境界線の条件を除く）。タイル群７０５は、タイムインスタンス（Ｔ）、（Ｔ＋１）では存在しないため、タイムインスタンス（Ｔ＋２）については、ビデオブロック７０８は制約されず、画像内のどこからでも予測される。タイムインスタンス（Ｔ＋３）については、ビデオブロック７０８が、タイムインスタンス（Ｔ）、（Ｔ＋１）での画像のどこからでも予測され（すなわち、何の制約もない）、または、タイムインスタンス（Ｔ＋２）でのタイル群７０５内から予測される。
図４から図７には図示しないが、タイル群は、空間的に連続していても連続していなくてもよいタイルから成るものしてよい。
タイル群は、表２の構文を使用してシグナリングされてよい。画像内のタイル群の数が、最初にシグナリングされる。各タイル群について、画像内に含まれるタイルの数がシグナリングされる。郡内のタイルの各インデックスがシグナリングされる。ラスタスキャン順序を使用して、１画像内のタイルにインデックスをつけることができる。１タイル群内のタイルは、関連の無いインデックスを有してよく、および／または、空間的に関連が無くてよい。種々の符号化実装を適用して、構文要素（例えば、表２に示すような）の値を符号化することができる。例えば、ｕｅ（ｖ）（指数ゴロム符号：Ｅｘｐｏｎｅｎｔｉａｌ Ｇｏｌｏｍｂ ｃｏｄｅ）および／またはｕ（ｖ）（固定長符号：ｆｉｘｅｄ ｌｅｎｇｔｈ ｃｏｄｉｎｇ）を使用することができる。構文要素（例えば、表２に示すような）の値は、画像内のタイルの数によって制限を受ける。それに従って、ｕ（ｖ）が使用される場合に、ビット数が決定される。
異なる実装を利用して、タイル群の構文要素をビデオビットストリームに組み込むことができる。タイルに関するパラメータは、ＰＰＳで（例えば、表１に示すように）シグナリングされてよい。タイル群パラメータ（例えば、表２に示すように）は、ＰＰＳで（例えば、タイルパラメータを送信後に）シグナリングされてよい。
タイル群は、ビデオユーザビリティ情報（ＶＵＩ）でシグナリングされてよい。ＶＵＩは、シーケンスパラメータセット（ＳＰＳ）の一部として表されてよい。ＶＵＩを使用して、例えば、ビットストリーム適合、色空間情報、および、ビットストリーム制約などに限定されないがある範囲の情報を、受信機に伝達することができる。ＶＵＩには、ビットストリーム内のタイルの使用に制限を与えるべく使用することができる構文要素を含んでもよい。例えば、ｔｉｌｅｓ＿ｆｉｘｅｄ＿ｓｔｒｕｃｔｕｒｅ＿ｆｌａｇを、ＶＵＩに使用することができる。ｔｉｌｅｓ＿ｆｉｘｅｄ＿ｓｔｒｕｃｔｕｒｅ＿ｆｌａｇは、タイルの構成を、同じビデオシーケンス内で画像から画像へ変更するかどうかを示すことができ、ｔｉｌｅｓ＿ｆｉｘｅｄ＿ｓｔｒｕｃｔｕｒｅ＿ｆｌａｇは、同じシーケンス内の１つまたは複数のアクティブなＰＰＳが、異なるタイルパラメータを有するかどうかを示すことができる。図６および図７に示す例は、ｔｉｌｅｓ＿ｆｉｘｅｄ＿ｓｔｒｕｃｔｕｒｅ＿ｆｌａｇが０に設定されている場合に存在する。タイル群パラメータは、例えば、表３に示すように、ＶＵＩの一部としてシグナリングされる。
タイル群のシグナリングはＳＥＩメッセージを介して提供される。ＨＥＶＣは、種々の目的で補足情報を伝達するための補足エンハンスメント情報（ＳＥＩ）メッセージのセットを定義することができる。ＳＥＩメッセージは受信装置側の特定の操作を円滑にするための映像に関する有用な情報を提供することができるが、メッセージは、デコーディング処理そのものに本質的なものではない。例えば、表示オリエンテーションＳＥＩメッセージ（ｄｉｓｐｌａｙ ｏｒｉｅｎｔａｔｉｏｎ ＳＥＩ ｍｅｓｓａｇｅ）（例えば、ＳＥＩペイロードタイプ４７）を使用して、ビデオシーケンス内の１つまたは複数の画像の向き（ｏｒｉｅｎｔａｔｉｏｎ）に関してデコーダに通知することができる（例えば、ＨＥＶＣで）。クライアント装置は、表示オリエンテーションＳＥＩメッセージを使用して、必要に応じて画像を回転させ、確実にユーザが正しい向きで映像を見ることができるようにすることができる。表示オリエンテーションＳＥＩメッセージが使用されないと、ビットストリームは、それでも正しくデコードされるが、シーケンス内の画像の内の１つまたは複数が、不正確に表示されることがある（例えば、１つまたは複数の画像が逆さま、時計回りまたは反時計回りに９０度回転している、など）。タイル群が、ＳＥＩメッセージとしてシグナリングされる場合、ＳＥＩペイロードタイプが、タイル群に割り当てられ、例えば、後に構文要素が続く（例えば、表２に示すように）。
本明細書では、タイル群およびＲＯＩ符号化を利用してデコーディングの複雑性を削減する実装について説明する。この実装では、タイル群およびＲＯＩ符号化を利用して、ＲＯＩと重ならない１つまたは複数のタイル群のデコーディングをスキップする。タイル群を使用して、より細かい粒度で、並列するデコーディングをさらに加速させることができる。例えば、マルチスレッドデコーディングが、タイルを使用し、タイル群を使用せずに、実行されるとき、参照画像のデコーディングは、異なるタイル間で画像レベルで同期される。これは、後続の画像内のタイルのデコーディングには、参照画像全体を参照することが必要であるからである。タイル群が有効であれば、参照画像のデコーディングは、タイル群レベル（例えば、サブ画像レベルと等しい）で同期される。これにより、デコーダは、スレッド間のデコーディング負荷をより良く調整することができる。
図８Ａは、１つまたは複数の開示される実施形態を実装することができる、一例の通信システム８００の図である。通信システム８００は、音声、データ、映像、メッセージング、放送、などのコンテンツを複数の無線ユーザに提供するマルチアクセスシステムとすることができる。通信システム８００では、複数の無線ユーザが、そのようなコンテンツに、無線帯域幅を含むシステムリソースを共有することによりアクセスすることが可能とされる。例えば、通信システム８００は、符号分割多元接続（ＣＤＭＡ）、時分割多元接続（ＴＤＭＡ）、周波数分割多元接続（ＦＤＭＡ）、直交周波数分割多元接続（ＯＦＤＭＡ：ｏｒｔｈｏｇｏｎａｌ ＦＤＭＡ）、シングルキャリア周波数分割多元接続（ＳＣ−ＦＤＭＡ（ｓｉｎｇｌｅ−ｃａｒｒｉｅｒ ＦＤＭＡ）、などの１つまたは複数のチャンネルアクセス方法を採用することができる。
図８Ａに示すように、通信システム８００には、無線送受信装置（ＷＴＲＵ）８０２ａ、８０２ｂ、８０２ｃ、８０２ｄと、無線アクセスネットワーク（ＲＡＮ）８０３／８０４／８０５、コアネットワーク８０６／８０７／８０９、公衆交換電話網（ＰＳＴＮ）８０８、インターネット８１０、および、他のネットワーク８１２を含むことができるが、開示される実施形態では、任意の数のＷＴＲＵ、基地局、ネットワーク、および／またはネットワーク要素を考慮することが理解される。ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄのそれぞれは、無線環境において動作および／または通信するように構成される任意のタイプの装置とすることができる。例として、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄは、無線信号を送信および／または受信するように構成されてよく、また、ユーザ装置（ＵＥ）、移動局、固定またはモバイルの加入者ユニット、ページャ、携帯電話、ＰＤＡ（ｐｅｒｓｏｎａｌ ｄｉｇｉｔａｌ ａｓｓｉｓｔａｎｔ）、スマートフォン、ラップトップ、ネットブック、パーソナルコンピュータ、無線センサ、家電、または、圧縮された映像通信を、受信および処理可能な任意の他の端末、を含むことができる。
通信システム８００にはまた、基地局８１４ａおよび基地局８１４ｂを含むことができる。各基地局８１４ａ、８１４ｂは、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄの内の少なくとも１つと無線でインターフェース接続して、コアネットワーク８０６／８０７／８０９、インターネット８１０，および／またはネットワーク８１２などの、１つまたは複数の通信ネットワークへのアクセスを円滑にするべく構成される、任意のタイプの装置とすることができる。例として、基地局８１４ａ、８１４ｂは、ベーストランシーバ基地局（ＢＴＳ）、Ｎｏｄｅ−Ｂ、ｅＮｏｄｅＢ、Ｈｏｍｅ ＮｏｄｅＢ、Ｈｏｍｅ ｅＮｏｄｅＢ、サイトコントローラ、アクセスポイント（ＡＰ）、無線ルータ、などとすることができる。基地局８１４ａ、８１４ｂはそれぞれ、単一の要素として示されるが、基地局８１４ａ、８１４ｂが任意の数の相互に接続する基地局および／またはネットワーク構成要素を含んでよいことが理解される。
基地局８１４ａは、ＲＡＮ８０３／８０４／８０５の一部であってよく、ＲＡＮ８０３／８０４／８０５はまた、基地局制御装置（ＢＳＣ）、無線ネットワーク制御装置（ＲＮＣ）、中継ノード、などの他の基地局および／またはネットワーク構成要素（図示せず）を含んでよい。基地局８１４ａおよび／または基地局８１４ｂは、特定の地理的領域内で無線信号を送信および／または受信するように構成されてよく、地理的領域とは、セル（図示せず）を指す。セルは、さらにセルセクタに分割することができる。例えば、基地局８１４ａに関連するセルは、３つのセクタに分割される。従って、一実施形態において、基地局８１４ａは、３つのトランシーバが、すなわち、セルの各セクタに１つ含まれる。別の実施形態において、基地局８１４ａは、マルチ−入力マルチ−出力（ＭＩＭＯ）の技術を採用することができ、また、従って、セルの各セクタに対して複数のトランシーバを利用することができる。
基地局８１４ａ、８１４ｂは、エアインターフェース８１５／８１６／８１７を介してＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄの内の１つまたは複数と通信することができ、該エアインターフェースは、任意の適切な無線通信リンク（例えば、無線周波数（ＲＦ）、マイクロウェーブ、赤外線（ＩＲ）、紫外線（ＵＶ）、可視光、など）であってよい。エアインターフェース８１５／８１６／８１７は、任意の適切な無線アクセス技術（ＲＡＴ）を使用して確立されてよい。
より具体的には、上記で記載したように、通信システム８００は、多重アクセスシステムであってよく、ＣＤＭＡ、ＴＤＭＡ、ＦＤＭＡ、ＯＦＤＭＡ、ＳＣ−ＦＤＭＡなどの１つまたは複数のチャンネルアクセススキームを採用することができる。例えば、ＲＡＮ８０３／８０４／８０５内の基地局８１４ａおよびＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃは、ユニバーサルモバイルテレコミュニケーションシステム（ＵＭＴＳ）地上波無線アクセス（ＵＴＲＡ）などの無線技術を実装することができ、該無線技術により、ＷＣＤＭ（ｗｉｄｅｂａｎｄ ＣＤＭＡ）を使用したエアインターフェース８１５／８１６／８１７を確立することができる。ＷＣＤＭＡ（登録商標）には、ＨＳＰＡ（Ｈｉｇｈ−Ｓｐｅｅｄ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）および／またはＥｖｏｌｖｅｄ ＨＳＰＡ（ＨＳＰＡ＋）などの通信プロトコルが含まれてよい。ＨＳＰＡには、ＨＳＤＰＡ（Ｈｉｇｈ−Ｓｐｅｅｄ Ｄｏｗｎｌｉｎｋ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）および／またはＨＳＵＰＡ（Ｈｉｇｈ−Ｓｐｅｅｄ Ｕｐｌｉｎｋ Ｐａｃｋｅｔ Ａｃｃｅｓｓ）が含まれてよい。
別の実施形態において、基地局８１４ａおよびＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃは、Ｅ−ＵＴＲＡ（Ｅｖｏｌｖｅｄ ＵＭＴＳ Ｔｅｒｒｅｓｔｒｉａｌ Ｒａｄｉｏ Ａｃｃｅｓｓ）などの無線技術を実装することができ、該無線技術により、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）および／またはＬＴＥ−Ａ（ＬＴＥ−Ａｄｖａｎｃｅｄ）を使用したエアインターフェース８１５／８１６／８１７を確立することができる。
他の実施形態において、基地局８１４ａおよびＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃは、無線技術、例えば、ＩＥＥＥ８０２．１６（すなわち、ＷｉＭＡＸ（Ｗｏｒｌｄｗｉｄｅ Ｉｎｔｅｒｏｐｅｒａｂｉｌｉｔｙ ｆｏｒ Ｍｉｃｒｏｗａｖｅ Ａｃｃｅｓｓ））、ＣＤＭＡ２０００、ＣＤＭＡ２０００ＩＸ、ＣＤＭＡ２０００ＥＶ−ＤＯ、ＩＳ−２０００（Ｉｎｔｅｒｉｍ Ｓｔａｎｄａｒｄ２０００）、ＩＳ−９５（Ｉｎｔｅｒｉｍ Ｓｔａｎｄａｒｄ９５）、ＩＳ−８５６（Ｉｎｔｅｒｉｍ Ｓｔａｎｄａｒｄ８５６）、ＧＳＭ（登録商標）（Ｇｌｏｂａｌ Ｓｙｓｔｅｍ ｆｏｒ Ｍｏｂｉｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ＥＤＧＥ（Ｅｎｈａｎｃｅｄ Ｄａｔａ ｒａｔｅｓ ｆｏｒ ＧＳＭ Ｅｖｏｌｕｔｉｏｎ）、ＧＥＲＡＮ（ＧＳＭ ＥＤＧＥ）、などを実装することができる。
図８Ａの基地局８１４ｂは、例えば、無線ルータ、Ｈｏｍｅ ＮｏｄｅＢ、Ｈｏｍｅ ｅＮｏｄｅＢ、アクセスポイントなどであってよく、例えば、事務所、家庭、車両、大学構内、などの局所的なエリアにおける無線接続性を円滑にするための任意の適切なＲＡＴを利用することができる。一実施形態において、基地局８１４ｂおよびＷＴＲＵ８０２ｃ、８０２ｄは、ＩＥＥＥ８０２．１１などの無線技術を実装して、無線ローカルエリアネットワーク（ＷＬＡＮ）を確立することができる。別の実施形態において、基地局８１４ｂおよびＷＴＲＵ８０２ｃ、８０２ｄは、ＩＥＥＥ８０２．１５などの無線技術を実装して、無線パーソナルエリアネットワーク（ＷＰＡＮ）を確立することができる。さらに別の実施形態において、基地局８１４ｂおよびＷＴＲＵ８０２ｃ、８０２ｄは、セルラベースのＲＡＴ（例えば、ＷＣＤＭＡ、ＣＤＭＡ２０００、ＧＳＭ，ＬＴＥ，ＬＴＥ−Ａなど）を利用して、ピコセルまたはフェムトセルを確立する。図８Ａに示すように、基地局８１４ｂは、インターネット８１０に直接接続することができる。従って、基地局８１４ｂは、コアネットワーク８０６／８０７／８０９を介してインターネット８１０にアクセスする必要が無い。
ＲＡＮ８０３／８０４／８０５は、コアネットワーク８０６と通信することができ、コアネットワーク８０６は、音声、データ、アプリケーション、および／または、音声を、インターネットプロトコル（ＶｏＩＰ）サービス上で、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄの内の１つまたは複数に提供するように構成された任意のタイプのネットワークとすることができる。例えば、コアネットワーク８０６／８０７／８０９は、呼制御、課金サービス、モバイル位置情報サービス、プリペイドコーリング、インターネット接続、ビデオ配信などを提供すること、および／または、ユーザ認証などの高レベルなセキュリティ機能を実行することができる。図８Ａには図示しないが、ＲＡＮ８０３／８０４／８０５、および／または、コアネットワーク８０６／８０７／８０９が、ＲＡＮ８０３／８０４／８０５と同じＲＡＴ、または、異なるＲＡＴを採用する他のＲＡＮと、直接的または間接的に通信することができることが理解される。例えば、Ｅ−ＵＴＲＡ無線技術を利用しているＲＡＮ８０３／８０４／８０５に接続することに加えて、コアネットワーク８０６／８０７／８０９は、ＧＳＭ無線技術を採用する別のＲＡＮ（図示せず）と通信することもできる。
コアネットワーク８０６／８０７／８０９は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄのゲートウェイとして働き、ＰＳＴＮ８０８、インターネット８１０、および／または他のネットワーク８１２にアクセスすることができる。ＰＳＴＮ８０８には、旧来の電話サービス（ＰＯＴＳ）を提供する回路交換方式の電話網が含まれよい。インターネット８１０には、伝送制御プロトコル（ＴＣＰ）、ユーザデータグラムプロトコル（ＵＤＰ）、および、ＴＣＰ／ＩＰインターネットプロトコル群のインターネットプロトコル（ＩＰ）などの共通の通信プロトコルを使用する、相互に接続されるコンピュータネットワークおよび装置のグローバルなシステムを含む。ネットワーク８１２は、他のサービスプロバイダによって所有および／または操作される有線または無線の通信ネットワークを含む。例えば、ネットワーク８１２は、１つまたは複数のＲＡＮに接続される別のコアネットワークを含み、該ＲＡＮは、ＲＡＮ８０３／８０４／８０５と同じＲＡＴまたは異なるＲＡＴを採用してよい。
通信システム８００におけるＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄの内のいくつかまたは全てには、マルチモード能力を含むことができ、すなわち、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、８０２ｄは、異なる無線リンク上で異なる無線ネットワークと通信するための複数のトランシーバを含む。例えば、図８Ａに示すＷＴＲＵ８０２ｃは、セルラベースの無線技術を採用することができる基地局８１４ａ、および、ＩＥＥＥ８０２無線技術を採用することができる基地局８１４ｂ、と通信するように構成される。
図８Ｂは、一例のＷＴＲＵ８０２のシステム図である。図８Ｂに示すように、ＷＴＲＵ８０２には、プロセッサ８１８、トランシーバ８２０、送受信要素８２２、スピーカ／マイクロフォン８２４、キーパッド８２６、ディスプレイ／タッチパッド８２８、非着脱式メモリ８３０、着脱式メモリ８３２、電源８３４、全地球測位
システム（ＧＰＳ）チップセット８３６、および、他の周辺機器８３８、を含む。ＷＴＲＵ８０２は、一実施形態と一貫性を保ちつつ、上記の要素の任意のサブコンビネーションを含むことが理解される。また、実施形態で考慮されることは、基地局８１４ａおよび８１４ｂ、および／または、基地局８１４ａおよび８１４ｂが表すノード、中でも、トランシーバ基地局（ＢＴＳ）、Ｎｏｄｅ−Ｂ、サイトコントローラ、ＡＰ（アクセスポイント）、ｈｏｍｅ ｎｏｄｅ−Ｂ、ｅＮｏｄｅＢ（ｅｖｏｌｖｅｄ ｈｏｍｅ ｎｏｄｅ−Ｂ）、ＨｅＮＢ（ｈｏｍｅ ｅｖｏｌｖｅｄ ｎｏｄｅ−Ｂ）、ｈｏｍｅ ｅｖｏｌｖｅｄ ｎｏｄｅ−Ｂゲートウェイ、および、プロキシノード、などに限定されないノードは、図１Ｂに示されおよび本明細書に記載される要素のいくつかまたは全てを含んでよい。
プロセッサ８１８は、汎用のプロセッサ、専用のプロセッサ、従来のプロセッサ、デジタルシグナルプロセッサ（ＤＳＰ）、グラフィックスプロセッシングユニット（ＧＰＵ）、複数のマイクロプロセッサ、ＤＳＰコアに関連する１つまたは複数のマイクロプロセッサ、コントローラ、マイクロコントローラ、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）回路、任意の他のタイプのＩＣ（集積回路）、状態機械、などとすることができる。プロセッサ８１８は、信号符号化、データ処理、電力制御、入出力処理、および／または、ＷＴＲＵ８０２が無線環境において動作することを可能にする、任意の他の機能性、を実行することができる。プロセッサ８１８は、トランシーバ８２０に連結されてよく、トランシーバ８２０は、送受信要素８２２に連結されてよい。図８Ｂでは、プロセッサ８１８とトランシーバ８２０とが別々の構成要素として描かれるが、プロセッサ８１８とトランシーバ８２０とが、１つの電子回路パッケージまたはチップに統合されてよいことは理解される。
送受信要素８２２は、エアインターフェース８１５／８１６／８１７上で、基地局（例えば、基地局８１４ａ）へ信号を送信または基地局から信号を受信するように構成される。例えば、一実施形態において、送受信要素８２２は、ＲＦ信号を送信および／または受信するように構成されるアンテナとすることができる。別の実施形態において、送受信要素８２２は、例えば、ＩＲ、ＵＶ、または可視光信号を、送信および／または受信するように構成されるエミッタ／検出器とすることができる。さらに別の実施形態において、送受信要素８２２は、ＲＦおよび光信号の両方を送受信するように構成される。送受信要素８２２が、無線信号の任意の組み合わせを送信および／または受信するべく構成されてよいことは理解されるであろう。
加えて、図８Ｂにおいて、送受信要素８２２は単一の要素として描かれるが、ＷＴＲＵ８０２は、任意の数の送受信要素８２２を含む。さらに詳細には、ＷＴＲＵ８０２は、ＭＩＭＯ技術を採用することができる。従って、一実施形態において、ＷＴＲＵ８０２は、エアインターフェース８１５／８１６／８１７上で無線信号を送受信するための２つ以上の送信／受信要素８２２（例えば、複数のアンテナ）を含む。
トランシーバ８２０は、送受信要素８２２によって送信されるべき信号を変調し、および、送受信要素８２２によって受信される信号を復調するように構成される。上述したように、ＷＴＲＵ８０２はマルチモード能力有することができる。従って、トランシーバ８２０は、ＷＴＲＵ８０２が、例えば、ＵＴＲＡおよびＩＥＥＥ８０２．１１などの複数のＲＡＴを介して通信することを可能にするための複数のトランシーバを含むことができる。
ＷＴＲＵ８０２のプロセッサ８１８は、スピーカ／マイクロフォン８２４、キーパッド８２６、および／または、ディスプレイ／タッチパッド８２８（例えば、液晶ディスプレイ（ＬＣＤ）表示装置、または、有機ダイオード（ＯＬＥＤ）表示装置）に連結され、およびそこからユーザ入力データを受け取る。プロセッサ８１８はまた、ユーザデータを、スピーカ／マイクロフォン８２４、キーパッド８２６、および／または、ディスプレイ／タッチパッド８２８へ出力することができる。加えて、プロセッサ８１８は、非着脱式メモリ８３０および／または着脱式メモリ８３２などの任意のタイプの適切なメモリ、からの情報にアクセスすること、および、そのメモリにデータを格納することができる。非着脱式メモリ８３０には、ＲＡＭ、ＲＯＭ、ハードディスク、または、任意の他のタイプの記憶装置を含む。着脱式メモリ８３２は、加入者識別モジュール（ＳＩＭ）カード、メモリスティック、セキュアデジタル（ＳＤ）メモリカード、などを含む。他の実施形態において、プロセッサ８１８は、ＷＴＲＵ８０２上に物理的に設置されない、サーバまたは家庭用コンピュータ（図示せず）上などのメモリ、からの情報にアクセスすること、および、そのメモリにデータを格納することができる。
プロセッサ８１８は、電源８３４から電力を受け取ることができ、また、ＷＴＲＵ８０２内の他の構成要素への電力を分配および／または制御するように構成される。電源８３４は、ＷＴＲＵ８０２に電力を供給するための任意の適切な装置であってよい。例えば、電源８３４は、１つまたは複数の乾電池（例えば、ニッケルカドミウム（ｉＣｄ）、ニッケル亜鉛（ＮｉＺｎ）、ニッケル水素（ＮｉＭＨ）、リチウムイオン（Ｌｉ−ｉｏｎ）、など）、太陽電池、燃料電池などを含む。
プロセッサ８１８はまた、ＧＰＳチップセット８３６と連結されてよく、ＧＰＳチップセット８３６は、ＷＴＲＵ８０２の現在の位置に関する位置情報（例えば、経度及び緯度）を提供するように構成される。ＧＰＳチップセット８３６からの情報に加えて、またはこれに代えて、ＷＴＲＵ８０２は、基地局（例えば、基地局８１４ａ、８１４ｂ）からエアインターフェース８１５／８１６／８１７上で位置情報を受信してもよいし、および／または、２つ以上の近隣の基地局から受信している信号のタイミングに基づきその位置を判定してもよい。ＷＴＲＵ８０２は、一実施形態と一貫性を保ちつつ、任意の適切な位置判定方法を用いて位置情報を取得することが理解される。
プロセッサ８１８はさらに他の周辺機器８３８と連結されてよく、周辺機器８３８は、追加的な特徴、機能性、および／または、有線または無線接続性を提供する１つまたは複数のソフトウェアおよび／またはハードウェアのモジュールを含む。例えば、周辺機器８３８は、加速度計、イーコンパス、衛星トランシーバ、デジタルカメラ（写真またはビデオ用）、ＵＳＢ（ｕｎｉｖｅｒｓａｌ ｓｅｒｉａｌｂｕｓ）ポート、振動装置、テレビトランシーバ、ハンズフリーヘッドセット、Ｂｌｕｅｔｏｏｔｈ（登録商標）モジュール、周波数変調（ＦＭ）無線装置、デジタルミュージックプレイヤ、メディアプレイヤ、ビデオゲームプレイヤモジュール、インターネットブライザ、などを含む。
図８Ｃは、一実施形態に係る、ＲＡＮ８０３およびコアネットワーク８０６のシステム図である。上述したように、ＲＡＮ８０３は、ＵＴＲＡ無線技術を採用して、エアインターフェース８１５上でＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信することができる。ＲＡＮ８０４はまた、コアネットワーク８０６と通信することもできる。図８Ｃに示すように、ＲＡＮ８０３は、Ｎｏｄｅ−Ｂ８４０ａ、８４０ｂ、８４０ｃを含み、Ｎｏｄｅ−Ｂにはそれぞれ、エアインターフェース８１５を介してＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信するための１つまたは複数のトランシーバを含む。Ｎｏｄｅ−Ｂ８４０ａ、８４０ｂ、８４０ｃは、それぞれＲＡＮ８０３内の特定のセル（図示せず）に関連する。ＲＡＮ８０３はまた、ＲＮＣ８４２ａ、８４２ｂを含む。ＲＡＮ８０３は、一実施形態と一貫性を保ちつつ、任意の数のＮｏｄｅ−ＢおよびＲＮＣを含んでよいことが理解される。
図８Ｃに示すように、Ｎｏｄｅ−Ｂ８４０ａ、８４０ｂは、ＲＮＣ８４２ａと通信することができる。加えて、Ｎｏｄｅ−Ｂ８４０ｃは、ＲＮＣ８４２ｂと通信することができる。Ｎｏｄｅ−Ｂ８４０ａ、８４０ｂ、８４０ｃは、Ｉｕｂインターフェースを介してそれぞれＲＮＣ８４２ａ、８４２ｂと通信することができる。ＲＮＣ８４２ａ、８４２ｂは、ｌｕｒインターフェースを介してお互いに通信することができる。各ＲＮＣ８４２ａ、８４２ｂは、接続されているＮｏｄｅ−Ｂ８４０ａ、８４０ｂ、８４０ｃそれぞれを制御するように構成される。加えて、各ＲＮＣ８４２ａ、８４２ｂは、外部ループ電力制御、負荷制御、アドミッション制御、パケットスケジューリング、ハンドオーバ制御、マクロダイバーシチ、セキュリティ機能、データ暗号化、などの他の機能性を実行またはサポートするように構成される。
図８Ｃに示すコアネットワーク８０６は、メディアゲートウェイ（ＭＧＷ）８４４、移動通信交換局（ＭＳＣ）８４６、サービングＧＰＲＳサポートノード（ＳＧＳＮ）８４８、および／または、ゲートウェイＧＰＲＳサポートノード（ＧＧＳＮ）８５０、を含む。上述の各要素は、コアネットワーク８０６の一部として描かれているが、これらの要素の任意の１つは、コアネットワーク操作者ではない他のエンティティにより所有および／または操作されてよいことが理解される。
ＲＡＮ８０３内のＲＮＣ８４２ａは、ＩｕＣＳインターフェースを介してコアネットワーク８０６内のＭＳＣ８４６と接続されてよい。ＭＳＣ８４６は、ＭＧＷ８４４と接続されてよい。ＭＳＣ８４６およびＭＧＷ８４４は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、ＰＳＴＮ８０８などの回路交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと、従来の陸線通信装置との間の通信を円滑にすることができる。
ＲＡＮ８０３内のＲＮＣ８４２ａもまた、ＩｕＰＳインターフェースを介してコアネットワーク８０６内のＳＧＳＮ８４８と接続されてよい。ＳＧＳＮ８４８は、ＧＧＳＮ８５０と接続されてよい。ＳＧＳＮ８４８およびＧＧＳＮ８５０は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、インターネット８１０などのパケット交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃとＩＰ対応の装置との間の通信を円滑にすることができる。
上述したように、コアネットワーク８０６も、ネットワーク８１２と接続されてよく、ネットワーク８１２は、他のサービスプロバイダによって所有および／または操作される他の有線または無線ネットワークを含む。
図８Ｄは、別の実施形態に対応した、ＲＡＮ８０４およびコアネットワーク８０７のシステム図である。上述したように、ＲＡＮ８０４は、Ｅ−ＵＴＲＡ無線技術を採用して、エアインターフェース８１６上でＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信することができる。ＲＡＮ８０４はまた、コアネットワーク８０７とも通信することができる。
ＲＡＮ８０４は、ｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃを含むが、ＲＡＮ８０４が、一実施形態と一貫性を保ちつつ、任意の数のｅＮｏｄｅ−Ｂを含んでよいことが理解される。ｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃはそれぞれ、エアインターフェース８１６を上でＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信するための１つまたは複数のトランシーバを含む。一実施形態において、ｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃは、ＭＩＭＯ技術を実装することができる。従って、ｅＮｏｄｅ−Ｂ８６０ａは、例えば、複数のアンテナを使用して、ＷＴＲＵ８０２ａに対して無線信号を送信し、ＷＴＲＵ８０２ａから無線信号を受信することができる。
ｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃのそれぞれは、特定のセル（図示せず）に関連してよく、無線資源管理決定、ハンドオーバ決定、アップリンクおよび／またはダウンリンクにおけるユーザのスケジューリング、などを処理するように構成される。図８Ｄに示すように、ｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃは、Ｘ２インターフェースを介してお互いに通信することができる。
図８Ｄに示すコアネットワーク８０７には、モビリティマネジメントゲートウェイ（ＭＭＥ）８６２、サービングゲートウェイ８６４、および、パケットデータネットワーク（ＰＤＮ）ゲートウェイ８６６を含む。上述の各要素は、コアネットワーク８０７の一部として描かれているが、これらの要素の任意の１つが、コアネットワーク操作者ではない他のエンティティによって所有および／または操作されてよいことが理解される。
ＭＭＥ８６２は、ＳＩインターフェースを介してＲＡＮ８０４内のｅＮｏｄｅ−Ｂ８６０ａ、８６０ｂ、８６０ｃのそれぞれに接続されてよく、また、制御ノードとして働くことができる。例えば、ＭＭＥ８６２は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃのユーザの認証、ベアラアクティベーション／デアクティベーション、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃを最初に装着する間の特定のサービングゲートウェイの選択、などの責任を果たすことができる。ＭＭＥ８６２はまた、ＲＡＮ８０４と、ＧＳＭまたはＷＣＤＭＡなどの他の無線技術を採用する他のＲＡＮ（図示せず）との間の切り換えを行うための制御プレーン機能を提供することができる。
サービングゲートウェイ８６４は、Ｓ１インターフェースを介して、ＲＡＮ８０４内のｅＮｏｄｅＢ８６０ａ、８６０ｂ、８６０ｃのそれぞれと接続されてよい。サービングゲートウェイ８６４は概して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃとの間で、ユーザデータパケットをルーティングして転送することができる。サービングゲートウェイ８６４はまた、ｅＮｏｄｅＢ間のハンドオーバ中にユーザプレーンを固定すること、ダウンリンクデータがＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃで利用可能なときにページングをトリガすること、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃのコンテキストを管理かつ格納すること、などの他の機能を行うことができる。
サービングゲートウェイ８６４はまた、ＰＤＮゲートウェイ８６６と接続されてよく、ＰＤＮゲートウェイ８６６は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、インターネット８１０などのパケット交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃとＩＰ対応の装置との間の通信を円滑にすることができる。
コアネットワーク８０７は、他のネットワークとの通信を円滑にすることができる。例えば、コアネットワーク８０７は、ＷＴＲＵ８０２ａ、８０２ｂ、１０２ｃに、ＰＳＴＮ８０８などの回路交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと、従来の陸線通信装置との間の通信を円滑にすることができる。例えば、コアネットワーク８０７は、コアネットワーク８０７とＰＳＴＮ８０８との間のインターフェースとして働くＩＰゲートウェイ（例えば、ＩＰマルチメディアサブシステム（ＩＭＳ）サーバ）を含むこと、または、これと通信することができる。加えて、コアネットワーク８０７は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、ネットワーク８１２へのアクセスを提供することができ、ネットワーク８１２には、他のサービスプロバイダにより所有および／または操作される他の有線または無線ネットワークが含まれてよい。
図８Ｅは、別の実施形態に係る、ＲＡＮ８０５およびコアネットワーク８０９のシステム図である。ＲＡＮ８０５は、ＩＥＥＥ８０２．１６無線技術を採用して、エアインターフェース８１７上でＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信する、アクセスサービスネットワーク（ＡＳＮ）とすることができる。以下でさらに検討するが、異なる機能のエンティティである、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃ、ＲＡＮ８０５、および、コアネットワーク８０９の間の通信リンクを、参照ポイントとして定義することができる。
図８Ｅに示すように、ＲＡＮ８０５は、基地局８８０ａ、８８０ｂ、８８０ｃ、およびＡＳＮゲートウェイ８８２を含むが、ＲＡＮ８０５は、一実施形態と一貫性を保ちつつ、任意の数の基地局およびＡＳＮゲートウェイを含むことが理解される。基地局８８０ａ、８８０ｂ、８８０ｃはそれぞれ、ＲＡＮ８０５内の特定のセル（図示せず）に関連してよく、エアインターフェース８１７上でＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと通信するための１つまたは複数のトランシーバを含むことができる。一実施形態において、基地局８８０ａ、８８０ｂ、８８０ｃは、ＭＩＭＯ技術を実装することができる。従って、基地局８８０ａは、例えば、複数のアンテナを使用して、ＷＴＲＵ８０２ａに対して無線信号を送信し、ＷＴＲＵ８０２ａから無線信号を受信することができる。基地局８８０ａ、８８０ｂ、８８０ｃはまた、ハンドオフトリガ、トンネル確立、無線資源管理、トラフィック分類、サービス品質（ＱｏＳ）ポリシーの強化、などのモビリティマネジメント機能を提供することができる。ＡＳＮゲートウェイ８８２は、トラフィック集約ポイントとして働くことができ、また、ページング、加入者プロファイルのキャッシュ、コアネットワーク８０９へのルーティング、などの責任を果たすことができる。
ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと、ＲＡＮ８０５との間のエアインターフェース８１７は、ＩＥＥＥ８０２．１６仕様を実装するＲ１参照ポイントとして定義される。加えて、各ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃは、コアネットワーク８０９との論理インターフェース（図示せず）を確立することができる。ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃとコアネットワーク８０９との論理インターフェースは、Ｒ２参照ポイントとして定義されてよく、Ｒ２参照ポイントは、認証、認可、ＩＰホスト構成管理、および／または、モビリティマネジメントに使用することができる。
基地局８８０ａ、８８０ｂ、８８０ｃ間の通信リンクは、ＷＴＲＵハンドオーバ、および基地局間のデータ転送を円滑するにするためのプロトコルを含む、Ｒ８参照ポイントとして定義される。基地局１９０ａ、８８０ｂ、８８０ｃと、ＡＳＮゲートウェイ８８２との間の通信リンクは、Ｒ６参照ポイントとして定義される。Ｒ６参照ポイントには、各ＷＴＲＵ８０２ａ、８０２ｂ、８００ｃに関連するモビリティ事象に基づくモビリティマネジメントを円滑にするためのプロトコルを含む。
図８Ｅに示すように、ＲＡＮ８０５は、コアネットワーク８０９に接続されてよい。ＲＡＮ８０５とコアネットワーク８０９との間の通信リンクは、例えば、データ転送およびモビリティマネジメント能力を円滑にするためのプロトコルを含むＲ３参照ポイントとして定義される。コアネットワーク８０９は、モバイルＩＰホームエージェント（ＭＩＰ−ＨＡ）８８４、認証、認可、アカウンティング（ＡＡＡ）サーバ８８６、および、ゲートウェイ８８８を含む。上述の各要素は、コアネットワーク８０９の一部として描かれているが、これらの要素のいずれか１つが、コアネットワーク操作者ではない他のエンティティによって所有および／または操作されてよいことが理解される。
ＭＩＰ−ＨＡ８８４は、ＩＰアドレス管理の責任を果たすことができ、また、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃが異なるＡＳＮ間および／または異なるコアネットワーク間でローミングを行うことを可能にすることができる。ＭＩＰ−ＨＡ８８４は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、インターネット８１０などのパケット交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと、ＩＰ対応の装置との間の通信を円滑にすることができる。ＡＡＡサーバ８８６は、ユーザ認証、および、ユーザサービスのサポートを行う責任を果たすことができる。ゲートウェイ８８８は、他のネットワークとの相互作用を円滑にすることができる。例えば、ゲートウェイ８８８は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、ＰＳＴＮ８０８などの回路交換ネットワークへのアクセスを提供して、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃと、従来の陸線通信装置との間の通信を円滑にすることができる。加えて、ゲートウェイ８８８は、ＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃに、ネットワーク８１２へのアクセスを提供することができ、ネットワーク８１２は、他のサービスプロバイダによって所有および／または操作される他の有線または無線ネットワークを含む。
図８Ｅには図示しないが、ＲＡＮ８０５が他のＡＳＮに接続されてよいこと、および、コアネットワーク８０９が他のコアネットワークに接続されてよいこと、が理解される。ＲＡＮ８０５と他のＡＳＮとの間の通信リンクは、Ｒ４参照ポイントとして定義されてよく、Ｒ４参照ポイントには、ＲＡＮ８０５と他のＡＳＮとの間のＷＴＲＵ８０２ａ、８０２ｂ、８０２ｃのモビリティを調整するためのプロトコルを含む。コアネットワーク８０９と他のコアネットワークとの間の通信リンクは、Ｒ５参照として定義されてよく、Ｒ５参照は、ホームのコアネットワークと、アクセス（ビジット）されたコアネットワークとの間の相互作用を円滑にするためのプロトコルを含む。
上記で説明したプロセスは、コンピュータおよび／またはプロセッサによって実行のためにコンピュータ可読媒体に組み込まれる、コンピュータプログラム、ソフトウェア、および／または、ファームウェアにおいて実装することができる。コンピュータ可読媒体の例には、電子信号（有線および／または無線の接続上で送信される）、および／またはコンピュータ可読記憶媒体、を含むがこれに限定されない。コンピュータ可読記憶媒体の例には、ＲＯＭ、ＲＡＭ、レジスタ、キャッシュメモリ、半導体メモリ装置、内臓ハードディスクおよびリムーバブルディスクなどを含むがこれらに限定されない磁気媒体、光磁気媒体、および／または、ＣＤ−ＲＯＭディスクおよび／またはＤＶＤなどの光媒体を含むがこれらに限定されない。ソフトウェアに関連するプロセッサを使用して、ＷＴＲＵ、ＵＥ、端末、基地局、ＲＮＣ、および／または、任意のホストコンピュータにおいて使用される無線周波数トランシーバを実装することができる。

Claims (1)

  1. ビデオシーケンスをエンコードするためのエンコーダであって、
    前記ビデオシーケンスにおける第１の画像をタイルに分割し、
    前記タイルのうちの少なくとも１つのタイルをタイル群にグループ化し、
    前記タイル群に関連付けられたパラメータを、補足エンハンスメント情報（ＳＥＩ）を介して送信し、前記パラメータは、タイル群の数、前記タイル群の各々におけるタイルの数、およびラスタスキャン順序に基づく１つまたは複数のタイルインデックスを示し、
    前記第１の画像における前記タイル群における画素の時間的動き補償予測が、前記ビデオシーケンスにおける第２の画像における前記タイル群内の参照画素を使用することに限定されるように、前記タイル群において時間的動き補償予測を制約する
    ように構成されたプロセッサ
    を備えたことを特徴とするエンコーダ。
JP2017004486A 2012-09-18 2017-01-13 タイルおよびタイル群を使用した関心領域ビデオ符号化 Pending JP2017092976A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201261702676P 2012-09-18 2012-09-18
US61/702,676 2012-09-18

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2015533147A Division JP2015533051A (ja) 2012-09-18 2013-09-18 タイルおよびタイル群を使用した関心領域ビデオ符号化

Publications (1)

Publication Number Publication Date
JP2017092976A true JP2017092976A (ja) 2017-05-25

Family

ID=49263476

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2015533147A Pending JP2015533051A (ja) 2012-09-18 2013-09-18 タイルおよびタイル群を使用した関心領域ビデオ符号化
JP2017004486A Pending JP2017092976A (ja) 2012-09-18 2017-01-13 タイルおよびタイル群を使用した関心領域ビデオ符号化

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2015533147A Pending JP2015533051A (ja) 2012-09-18 2013-09-18 タイルおよびタイル群を使用した関心領域ビデオ符号化

Country Status (7)

Country Link
US (2) US9554133B2 (ja)
EP (1) EP2898695A1 (ja)
JP (2) JP2015533051A (ja)
KR (2) KR101835802B1 (ja)
CN (1) CN104885456A (ja)
TW (2) TWI669952B (ja)
WO (1) WO2014047134A1 (ja)

Families Citing this family (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding
US9621905B2 (en) * 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
MY172999A (en) * 2012-07-09 2019-12-18 Vid Scale Inc Codec architecture for multiple layer video coding
EP2898695A1 (en) * 2012-09-18 2015-07-29 VID SCALE, Inc. Region of interest video coding using tiles and tile groups
CN108429917B (zh) 2012-09-29 2022-04-29 华为技术有限公司 视频编码及解码方法、装置及系统
GB2509954B (en) * 2013-01-18 2016-03-23 Canon Kk Method of displaying a region of interest in a video stream
CN109862373B (zh) * 2013-07-15 2021-10-15 索尼公司 用于对比特流进行编码的方法和装置
MY182651A (en) * 2013-07-22 2021-01-27 Sony Corp Information processing apparatus and method
CN106233745B (zh) 2013-07-29 2021-01-15 皇家Kpn公司 向客户端提供瓦片视频流
JP6209026B2 (ja) * 2013-08-30 2017-10-04 キヤノン株式会社 画像符号化装置及びその制御方法
GB2542282B (en) * 2013-10-22 2018-08-01 Canon Kk Method, device, and computer program for encapsulating partitioned timed media data in a server
JP6692087B2 (ja) * 2013-12-27 2020-05-13 サン パテント トラスト 配信方法、およびシステム
US9386275B2 (en) * 2014-01-06 2016-07-05 Intel IP Corporation Interactive video conferencing
EP3092815B1 (en) * 2014-01-10 2019-02-27 Sony Corporation Method for improving the power consumption of a mobile device during video streaming
US11228764B2 (en) 2014-01-15 2022-01-18 Avigilon Corporation Streaming multiple encodings encoded using different encoding parameters
US10397666B2 (en) * 2014-06-27 2019-08-27 Koninklijke Kpn N.V. Determining a region of interest on the basis of a HEVC-tiled video stream
US10694192B2 (en) 2014-06-27 2020-06-23 Koninklijke Kpn N.V. HEVC-tiled video streaming
EP2961182A1 (en) * 2014-06-27 2015-12-30 Alcatel Lucent Method, system and device for navigating in ultra high resolution video content by a client device
US9516220B2 (en) 2014-10-02 2016-12-06 Intel Corporation Interactive video conferencing
US10021161B2 (en) * 2014-11-05 2018-07-10 Qualcomm Incorporated Compression of graphical commands for remote display
US10021346B2 (en) 2014-12-05 2018-07-10 Intel IP Corporation Interactive video conferencing
US10715843B2 (en) 2015-08-20 2020-07-14 Koninklijke Kpn N.V. Forming one or more tile streams on the basis of one or more video streams
WO2017036953A1 (en) * 2015-09-02 2017-03-09 Thomson Licensing Method, apparatus and system for facilitating navigation in an extended scene
JP6589526B2 (ja) * 2015-09-30 2019-10-16 ブラザー工業株式会社 ビットレート決定装置、サーバ装置、ビットレート決定方法、及びプログラム
KR20170042431A (ko) * 2015-10-08 2017-04-19 삼성전자주식회사 디스플레이 모양에 따라 영상 데이터를 불균일하게 인코딩/디코딩하도록 구성되는 전자 장치
WO2017060423A1 (en) 2015-10-08 2017-04-13 Koninklijke Kpn N.V. Enhancing a region of interest in video frames of a video stream
JP6587539B2 (ja) * 2015-12-28 2019-10-09 キヤノン株式会社 送信装置、情報処理方法及びプログラム
EP3412032A1 (en) * 2016-02-02 2018-12-12 Fraunhofer Gesellschaft zur Förderung der Angewand Scene section and region of interest handling in video streaming
EP3226561A1 (en) 2016-03-31 2017-10-04 Thomson Licensing Method and apparatus for coding a video into a bitstream carrying region-based post processing parameters into an sei nesting message
US10565463B2 (en) * 2016-05-24 2020-02-18 Qualcomm Incorporated Advanced signaling of a most-interested region in an image
US10917564B2 (en) * 2016-10-12 2021-02-09 Qualcomm Incorporated Systems and methods of generating and processing files for partial decoding and most interested regions
EP3334164B1 (en) * 2016-12-09 2019-08-21 Nokia Technologies Oy A method and an apparatus and a computer program product for video encoding and decoding
KR102424829B1 (ko) 2017-02-22 2022-07-25 에스케이텔레콤 주식회사 비디오 데이터가 부호화된 비트스트림을 처리하는 방법
WO2018155939A1 (ko) 2017-02-22 2018-08-30 에스케이텔레콤 주식회사 영상 복호화 방법 및 장치
KR102390413B1 (ko) * 2017-03-03 2022-04-25 에스케이텔레콤 주식회사 영상 부호화 또는 복호화하기 위한 장치 및 방법
US11139000B2 (en) * 2017-03-07 2021-10-05 Mediatek Inc. Method and apparatus for signaling spatial region information
KR102334628B1 (ko) * 2017-03-17 2021-12-03 엘지전자 주식회사 360도 비디오의 영역 정보 전달 방법 및 장치
KR20180112708A (ko) 2017-04-03 2018-10-12 한국전자통신연구원 고화질 360도 vr 영상 처리 장치 및 방법
KR20200005539A (ko) * 2017-04-11 2020-01-15 브이아이디 스케일, 인크. 면 연속성을 사용하는 360 도 비디오 코딩
BR112019025471A2 (pt) * 2017-06-09 2020-06-23 Sony Semiconductor Solutions Corporation Dispositivo de transmissão de figura, e, dispositivo de recepção de figura
JP6907079B2 (ja) * 2017-09-14 2021-07-21 キヤノン株式会社 撮像装置、撮像装置の制御方法及びプログラム
WO2019103126A1 (en) * 2017-11-22 2019-05-31 Sharp Kabushiki Kaisha Systems and methods for signaling tile structures for pictures of coded video
CN109996072B (zh) 2018-01-03 2021-10-15 华为技术有限公司 视频图像的处理方法及装置
GB2570498A (en) * 2018-01-29 2019-07-31 Canon Kk A method and user device for displaying video data, a method and apparatus for streaming video data and a video surveillance system
US11037019B2 (en) 2018-02-27 2021-06-15 Adobe Inc. Generating modified digital images by identifying digital image patch matches utilizing a Gaussian mixture model
WO2019189890A1 (en) * 2018-03-30 2019-10-03 Sharp Kabushiki Kaisha Systems and methods for signaling tile structures for pictures of coded video
WO2019195036A1 (en) * 2018-04-03 2019-10-10 Futurewei Technologies, Inc. File format signaling of error mitigation in sub-picture bitstream based viewport dependent video coding
WO2019199024A1 (ko) * 2018-04-10 2019-10-17 엘지전자 주식회사 360 영상 데이터의 서브픽처 기반 처리 방법 및 그 장치
SI3809702T1 (sl) 2018-06-15 2023-09-29 Lg Electronics, Inc. Postopek in naprave za entropijsko kodiranje na podlagi cabac-a
EP3818710A4 (en) 2018-07-02 2022-06-29 Nokia Technologies Oy Method and apparatus for tile-relative addressing in video coding
US20200014740A1 (en) * 2018-07-06 2020-01-09 Avigilon Corporation Tile stream selection for mobile bandwith optimization
US10841602B2 (en) * 2018-07-16 2020-11-17 Tencent America LLC Hierarchical tiles
US10798389B2 (en) * 2018-10-02 2020-10-06 Tencent America LLC Method and apparatus for content-aware point cloud compression using HEVC tiles
US10944991B2 (en) * 2018-10-03 2021-03-09 Samsung Electronics Co., Ltd. Prediction for matched patch index coding
US10779014B2 (en) 2018-10-18 2020-09-15 At&T Intellectual Property I, L.P. Tile scheduler for viewport-adaptive panoramic video streaming
WO2020089822A1 (en) 2018-10-31 2020-05-07 Beijing Bytedance Network Technology Co., Ltd. Overlapped block motion compensation with derived motion information from neighbors
KR102572140B1 (ko) * 2018-11-30 2023-08-30 샤프 가부시키가이샤 코딩된 비디오의 픽처들에 대한 타일 구조들을 시그널링하기 위한 시스템들 및 방법들
EP3891983A1 (en) * 2018-12-04 2021-10-13 VID SCALE, Inc. Tile group partitioning
EP3668096A1 (en) * 2018-12-11 2020-06-17 Axis AB Method and device for encoding a sequence of image frames using a first and a second encoder
BR112021011413A2 (pt) * 2018-12-17 2021-08-31 Huawei Technologies Co., Ltd. Método e aparelho de codificação de vídeo
WO2020130912A1 (en) * 2018-12-20 2020-06-25 Telefonaktiebolaget Lm Ericsson (Publ) Improved tile address signalling in video encoding and decoding
WO2020130139A1 (ja) * 2018-12-21 2020-06-25 シャープ株式会社 動画像符号化装置および動画像復号装置
US11477445B2 (en) * 2018-12-28 2022-10-18 Hfi Innovation Inc. Methods and apparatuses of video data coding with tile grouping
WO2020175908A1 (ko) * 2019-02-26 2020-09-03 엘지전자 주식회사 시그널링된 정보에 기반한 픽처 파티셔닝 방법 및 장치
WO2020179713A1 (en) * 2019-03-06 2020-09-10 Sharp Kabushiki Kaisha Systems and methods for signaling tile group information in video coding
KR20210087090A (ko) * 2019-03-11 2021-07-09 텐센트 아메리카 엘엘씨 타일 및 서브-픽처 파티셔닝
US10762680B1 (en) 2019-03-25 2020-09-01 Adobe Inc. Generating deterministic digital image matching patches utilizing a parallel wavefront search approach and hashed random number
US11606574B2 (en) * 2019-05-31 2023-03-14 Apple Inc. Efficient coding of source video sequences partitioned into tiles
US11523185B2 (en) 2019-06-19 2022-12-06 Koninklijke Kpn N.V. Rendering video stream in sub-area of visible display area
WO2021033853A1 (en) * 2019-08-21 2021-02-25 Samsung Electronics Co., Ltd. Method and system for processing content having sensitive portion
EP4035387A4 (en) * 2019-09-27 2023-10-18 Nokia Technologies Oy FACTIONAL ARBITRARY TILE GROUPING
JP2021057770A (ja) * 2019-09-30 2021-04-08 株式会社ソニー・インタラクティブエンタテインメント 画像データ転送装置および画像圧縮方法
US11449974B2 (en) 2019-11-08 2022-09-20 Adobe Inc. Generating modified digital images utilizing nearest neighbor fields from patch matching operations of alternate digital images
CN114885165B (zh) * 2022-06-30 2023-04-04 深圳比特微电子科技有限公司 图像帧的环路滤波方法、装置及电子设备和存储介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015533051A (ja) * 2012-09-18 2015-11-16 ヴィド スケール インコーポレイテッド タイルおよびタイル群を使用した関心領域ビデオ符号化

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3952459B2 (ja) * 2002-11-15 2007-08-01 株式会社リコー 画像処理装置、プログラム、記憶媒体及び画像処理方法
KR100543700B1 (ko) 2003-01-30 2006-01-20 삼성전자주식회사 영상의 중복 부호화 및 복호화 방법 및 장치
US8494052B2 (en) * 2006-04-07 2013-07-23 Microsoft Corporation Dynamic selection of motion estimation search ranges and extended motion vector ranges
US8630355B2 (en) 2006-12-22 2014-01-14 Qualcomm Incorporated Multimedia data reorganization between base layer and enhancement layer
CN101578865A (zh) * 2006-12-22 2009-11-11 高通股份有限公司 用于内容自适应视频帧切割及非一致存取单元编码的技术
US8428125B2 (en) 2006-12-22 2013-04-23 Qualcomm Incorporated Techniques for content adaptive video frame slicing and non-uniform access unit coding
US20100232504A1 (en) 2009-03-13 2010-09-16 The State of Oregon acting by and through the State Board of Higher Education on behalf of the Supporting region-of-interest cropping through constrained compression
US9113169B2 (en) * 2009-05-07 2015-08-18 Qualcomm Incorporated Video encoding with temporally constrained spatial dependency for localized decoding
US9456015B2 (en) * 2010-08-10 2016-09-27 Qualcomm Incorporated Representation groups for network streaming of coded multimedia data
US9060174B2 (en) * 2010-12-28 2015-06-16 Fish Dive, Inc. Method and system for selectively breaking prediction in video coding
US20120170648A1 (en) * 2011-01-05 2012-07-05 Qualcomm Incorporated Frame splitting in video coding
US9584819B2 (en) * 2011-10-24 2017-02-28 Qualcomm Incorporated Grouping of tiles for video coding

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015533051A (ja) * 2012-09-18 2015-11-16 ヴィド スケール インコーポレイテッド タイルおよびタイル群を使用した関心領域ビデオ符号化

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MISKA M. HANNUKSELA ET AL.: "Isolated regions in video coding", IEEE TRANSACTIONS ON MULTIMEDIA, vol. 6, no. 2, JPN6017049141, 22 March 2004 (2004-03-22), pages 259 - 267, ISSN: 0004074349 *
YE-KUI WANG ET AL., TILE GROUPS, JPN6016005655, 21 November 2011 (2011-11-21), ISSN: 0004074348 *

Also Published As

Publication number Publication date
JP2015533051A (ja) 2015-11-16
TW201824871A (zh) 2018-07-01
KR101835802B1 (ko) 2018-03-08
WO2014047134A1 (en) 2014-03-27
CN104885456A (zh) 2015-09-02
US20170094269A1 (en) 2017-03-30
US10057570B2 (en) 2018-08-21
TWI669952B (zh) 2019-08-21
KR20180026803A (ko) 2018-03-13
EP2898695A1 (en) 2015-07-29
TW201436535A (zh) 2014-09-16
US20140079126A1 (en) 2014-03-20
TWI620435B (zh) 2018-04-01
US9554133B2 (en) 2017-01-24
KR20150058428A (ko) 2015-05-28

Similar Documents

Publication Publication Date Title
JP2017092976A (ja) タイルおよびタイル群を使用した関心領域ビデオ符号化
JP7169988B2 (ja) 面連続性を使用する３６０度ビデオコーディング
JP6954763B2 (ja) マルチレイヤビデオコーディングの適応型アップサンプリング
US11277635B2 (en) Predictive coding for 360-degree video based on geometry padding
JP6420429B2 (ja) Ｈｅｖｃ拡張のためのレイヤ間パラメータセット
JP6401161B2 (ja) マルチレイヤビデオコーディングにおける空間レイヤのためのサンプリンググリッド情報
JP7249948B2 (ja) ジオメトリパディングに基づいた３６０度ビデオのための予測符号化
TW202046736A (zh) 光流相互預測精化系統、裝置及方法
TWI651964B (zh) 用於標準可縮放視訊編碼的參考圖像集映射
CN111602401B (zh) 用于360度视频译码的自适应帧封装
CN113826400A (zh) 用于利用光流的解码器侧运动向量细化的预测细化的方法和装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170314

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171213

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171226

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180323

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181030

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190130

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190716