JPWO2014097816A1 - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JPWO2014097816A1 JPWO2014097816A1 JP2014553036A JP2014553036A JPWO2014097816A1 JP WO2014097816 A1 JPWO2014097816 A1 JP WO2014097816A1 JP 2014553036 A JP2014553036 A JP 2014553036A JP 2014553036 A JP2014553036 A JP 2014553036A JP WO2014097816 A1 JPWO2014097816 A1 JP WO2014097816A1
- Authority
- JP
- Japan
- Prior art keywords
- layer
- quantization
- unit
- quantization parameter
- encoded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/34—Scalability techniques involving progressive bit-plane based encoding of the enhancement layer, e.g. fine granular scalability [FGS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Abstract
Description
−空間スケーラビリティ:空間解像度あるいは画像サイズが階層化される。
−時間スケーラビリティ:フレームレートが階層化される。
−SNR(Signal to Noise Ratio)スケーラビリティ:SN比が階層化される。
さらに、標準規格で未だ採用されていないものの、ビット深度スケーラビリティ及びクロマフォーマットスケーラビリティもまた議論されている。
1.概要
1−1.スケーラブル符号化
1−2.一般的なレート制御
1−3.色差成分の量子化パラメータ
1−4.量子化行列
1−5.エンコーダの基本的な構成例
1−6.デコーダの基本的な構成例
2.一実施形態に係るEL符号化部の構成例
2−1.全体的な構成
2−2.量子化制御部の詳細な構成
3.一実施形態に係る符号化時の処理の流れ
3−1.概略的な流れ
3−2.量子化に関連する処理
4.一実施形態に係るEL復号部の構成例
4−1.全体的な構成
4−2.逆量子化制御部の詳細な構成
5.一実施形態に係る復号時の処理の流れ
5−1.概略的な流れ
5−2.逆量子化に関連する処理
5−3.シンタックスの例
6.コーデックの組合せの例
7.応用例
7−1.様々な製品への応用
7−2.スケーラブル符号化の様々な用途
7−3.他のコーデックへの応用
7−4.様々な実装レベル
7−5.MPEG−DASHを利用するシステム
7−6.Wi−FiのP2Pモードを利用するシステム
8.まとめ
[1−1.スケーラブル符号化]
スケーラブル符号化においては、一連の画像をそれぞれ含む複数のレイヤが符号化される。ベースレイヤ(base layer)は、最初に符号化される、最も粗い画像を表現するレイヤである。ベースレイヤの符号化ストリームは、他のレイヤの符号化ストリームを復号することなく、独立して復号され得る。ベースレイヤ以外のレイヤは、エンハンスメントレイヤ(enhancement layer)と呼ばれる、より精細な画像を表現するレイヤである。エンハンスメントレイヤの符号化ストリームは、ベースレイヤの符号化ストリームに含まれる情報を用いて符号化される。従って、エンハンスメントレイヤの画像を再現するためには、ベースレイヤ及びエンハンスメントレイヤの双方の符号化ストリームが復号されることになる。スケーラブル符号化において扱われるレイヤの数は、2つ以上のいかなる数であってもよい。3つ以上のレイヤが符号化される場合には、最下位のレイヤがベースレイヤ、残りの複数のレイヤがエンハンスメントレイヤである。より上位のエンハンスメントレイヤの符号化ストリームは、より下位のエンハンスメントレイヤ又はベースレイヤの符号化ストリームに含まれる情報を用いて符号化され及び復号され得る。
画像の周波数特性は、直交変換の結果として発生する変換係数データのビット数を左右する。符号化ストリームのビットレートを一定に保つために、通常、変換係数データのビット数が多ければ、変換係数データは、より大きい量子化ステップで量子化される。期待されるビットレートを実現するためのレート制御方式の一例は、MPEG2テストモデルにおいて示されている。MPEG2テストモデルでは、まず、GOPに割当てられるビット量と、GOP内の各ピクチャのピクチャタイプ及び複雑度(Global Complexity Measure)とに基づいて、ピクチャごとの割当て符号量が決定される。そして、各ピクチャ内のマクロブロックごとの量子化パラメータ(量子化スケールコード)が、マクロブロックごとに算出されるアクティビティと当該ピクチャの割当て符号量とに基づいて算出される。ここでのアクティビティは、画像の複雑さを表す指標の一種である。なお、MPEG2テストモデルにおけるレート制御方式の詳細は、次のWebページにおいて公開されている。
−参考URL http://www.mpeg.org/MPEG/MSSG/tm5/Ch10/Ch10.html
前項で説明した量子化パラメータの算出手法は、主に輝度成分の量子化パラメータについての手法である。色差成分については、輝度成分の量子化パラメータにオフセットを加算することにより、色差成分のために調整された量子化パラメータを使用することができる。上記非特許文献1に記載されたシンタックスを参照すると、色差成分の量子化パラメータのオフセットは、PPS内のpic_cb_qp_offset及びpic_cr_qp_offset、並びにスライスヘッダ内のslice_cb_qp_offset及びslice_cr_qp_offsetによって指定される。pic_cb_qp_offsetとslice_cb_qp_offsetとの和がCb成分の量子化パラメータのオフセットであり、pic_cr_qp_offsetとslice_cr_qp_offsetとの和がCr成分の量子化パラメータのオフセットである。
量子化行列(スケーリングリストともいう)は、画像の高周波成分を感知しにくいという人間の視覚特性を利用して、高周波成分を低周波成分よりも粗く量子化するために導入される技術である。量子化行列が利用される場合、前項までに説明した量子化パラメータに対応する量子化ステップそのものの代わりに、量子化行列の各要素の値でスケーリングされた量子化ステップが、変換係数データを量子化し及び逆量子化するために使用される。AVC方式では、4×4画素及び8×8画素のサイズをそれぞれ有する量子化行列が利用可能である。これに対し、HEVC方式では、4×4画素、8×8画素、16×16画素及び32×32画素のサイズをそれぞれ有する量子化行列が利用可能である。但し、HEVC方式では、符号量の削減のために、16×16画素及び32×32画素の量子化行列は、直流成分を除いて、それぞれ8×8画素のサイズで符号化され、使用時に当該8×8画素のサイズからゼロ次オーダホールドでアップサンプリングされる。直流成分は別途符号化される。
図5は、スケーラブル符号化をサポートする、一実施形態に係る画像符号化装置10の概略的な構成を示すブロック図である。図5を参照すると、画像符号化装置10は、ベースレイヤ(BL)符号化部1a、エンハンスメントレイヤ(EL)符号化部1b、共通メモリ2及び多重化部3を備える。
図6は、スケーラブル符号化をサポートする、一実施形態に係る画像復号装置60の概略的な構成を示すブロック図である。図6を参照すると、画像復号装置60は、逆多重化部5、ベースレイヤ(BL)復号部6a、エンハンスメントレイヤ(EL)復号部6b及び共通メモリ7を備える。
[2−1.全体的な構成]
図7は、図5に示したEL符号化部1bの構成の一例を示すブロック図である。図7を参照すると、EL符号化部1bは、並び替えバッファ11、減算部13、直交変換部14、量子化部15、可逆符号化部16、蓄積バッファ17、レート制御部18、逆量子化部21、逆直交変換部22、加算部23、デブロックフィルタ24、フレームメモリ25、セレクタ26及び27、イントラ予測部30、インター予測部35並びに量子化制御部40を備える。
図8は、図7に示した量子化制御部40の構成の一例を示すブロック図である。図8を参照すると、量子化制御部40は、QP設定部41、QPパラメータ生成部42、SL設定部43及びSLパラメータ生成部44を有する。
QP設定部41は、エンハンスメントレイヤの輝度成分及び色差成分の変換係数データを量子化する際に量子化部15により実際に使用される量子化パラメータを、エンハンスメントレイヤの各ブロックに設定する。QP設定部41により設定される当該量子化パラメータは、逆量子化部21が量子化データを逆量子化する際にも使用される。ここでのブロックは、LCUと等しいサイズ又はLCUよりも小さいサイズを有し得る。例えば、QP設定部41は、レート制御部18から入力されるレート制御信号に従って、輝度成分(Y)の量子化パラメータ及び色差成分(Cb,Cr)の量子化パラメータを設定してもよい。その代わりに、QP設定部41は、予めユーザにより指定される輝度成分の量子化パラメータ及び色差成分の量子化パラメータを設定してもよい。そして、QP設定部41は、エンハンスメントレイヤの各ブロックに設定した量子化パラメータ(QP(EL))を、量子化部15、逆量子化部21及びQPパラメータ生成部42へ出力する。
QPパラメータ生成部42は、QP設定部41から入力されるエンハンスメントレイヤの量子化パラメータと共通メモリ2によりバッファリングされるベースレイヤのQPパラメータとに基づいて、エンハンスメントレイヤのQPパラメータを生成する。輝度成分のQPパラメータは、上記非特許文献1に記載された仕様に従って生成されてよい。
SL設定部43は、エンハンスメントレイヤの輝度成分及び色差成分の変換係数データを量子化する際に量子化部15により実際に使用され得る量子化行列を、エンハンスメントレイヤの各ブロックに設定する。SL設定部43により設定される当該量子化行列は、逆量子化部21が量子化データを逆量子化する際にも使用され得る。例えば、SL設定部43は、レート制御部18から入力されるレート制御信号に従って、各色成分(Y,Cb,Cr)の各予測モード(イントラ/インター)の4×4画素、8×8画素、16×16画素及び32×32画素のサイズを有する量子化行列をそれぞれ設定してもよい。その代わりに、SL設定部43は、予めユーザにより指定される量子化行列を設定してもよい。そして、SL設定部43は、エンハンスメントレイヤの各ブロックに設定した量子化行列(SL(EL))を、量子化部15、逆量子化部21及びSLパラメータ生成部44へ出力する。
量子化行列がレイヤ間で再利用される場合において、SLパラメータ生成部44による処理は、ベースレイヤがHEVC方式で符号化されるか否かに依存して異なる。上記非特許文献2によれば、ベースレイヤがHEVC方式で符号化されるか否かは、VPS(Video Parameter Set)内に符号化されるフラグavc_base_layer_flagにより示される。図9A〜図9Dは、量子化行列の再利用について説明するための説明図である。
[3−1.概略的な流れ]
図10は、一実施形態に係る符号化時の概略的な処理の流れの一例を示すフローチャートである。なお、説明の簡明さのために、本開示に係る技術に直接的に関連しない処理ステップは、図から省略されている。
図11は、エンハンスメントレイヤの符号化処理(図10のステップS13)における量子化に関連する処理の流れの一例を示すフローチャートである。図11に示した処理は、例えば、エンハンスメントレイヤ画像内のスライスごとに繰り返され得る。
[4−1.全体的な構成]
図12は、図6に示したEL復号部6bの構成の一例を示すブロック図である。図12を参照すると、EL復号部6bは、蓄積バッファ61、可逆復号部62、逆量子化部63、逆直交変換部64、加算部65、デブロックフィルタ66、並び替えバッファ67、D/A(Digital to Analogue)変換部68、フレームメモリ69、セレクタ70及び71、イントラ予測部75、インター予測部80並びに逆量子化制御部90を備える。
図13は、図12に示した逆量子化制御部90の構成の一例を示すブロック図である。図13を参照すると、逆量子化制御部90は、QPパラメータ取得部91、QP設定部92、SLパラメータ取得部93及びSL設定部94を有する。
QPパラメータ取得部91は、エンハンスメントレイヤの符号化ストリームから可逆復号部62により復号されるQPパラメータを取得する。QPパラメータ取得部91により取得される輝度成分のQPパラメータは、上述したpic_init_qp_minus26、slice_qp_delta、cu_qp_delta_abs及びcu_qp_delta_signを含み得る。また、QPパラメータ取得部91により取得される色差成分のQPパラメータは、Cb成分についての量子化パラメータオフセット差分slice_cbE_qp_offset、及びCr成分についての量子化パラメータオフセット差分slice_crE_qp_offsetを含み得る。
QP設定部92は、エンハンスメントレイヤの変換係数データを逆量子化する際に逆量子化部63により使用される量子化パラメータを、エンハンスメントレイヤの各ブロックに設定する。ここでのブロックは、LCUと等しいサイズ又はLCUよりも小さいサイズを有し得る。
SLパラメータ取得部93は、ベースレイヤがHEVC方式以外の画像符号化方式(例えば、AVC方式)で符号化されている場合に、エンハンスメントレイヤの符号化ストリームから、可逆復号部62により復号されるSLパラメータを取得する。例えば、SLパラメータ取得部93は、ベースレイヤがAVC方式で符号化される場合に、16×16画素及び32×32画素のサイズを有する量子化行列を指定するSLパラメータを取得する。また、SLパラメータ取得部93は、レイヤ間で量子化行列が再利用されない場合にも、エンハンスメントレイヤの符号化ストリームから、可逆復号部62により復号されるSLパラメータを取得する。この場合、4×4画素〜32×32画素のサイズを有する量子化行列を指定するSLパラメータが取得される。なお、16×16画素以上のサイズを有する量子化行列のSLパラメータは、典型的には、図9Bを用いて説明したように、8×8画素のサイズに各量子化行列をダウンサンプリングした上で符号化されている。SLパラメータ取得部93は、取得したエンハンスメントレイヤのSLパラメータを、SL設定部94へ出力する。なお、SLパラメータ取得部93は、レイヤ間で量子化行列が再利用される場合において、ベースレイヤがHEVC方式で符号化されているときは、エンハンスメントレイヤのSLパラメータを取得しなくてよい。SLパラメータ取得部93は、ベースレイヤがHEVC方式で符号化されているか否かを、VPSから復号されるフラグavc_base_layer_flagを参照することにより判定し得る。
SL設定部94は、エンハンスメントレイヤの輝度成分及び色差成分の変換係数データを逆量子化する際に逆量子化部63により使用される量子化行列を、エンハンスメントレイヤに設定する。
[5−1.概略的な流れ]
図14は、一実施形態に係る復号時の概略的な処理の流れの一例を示すフローチャートである。なお、説明の簡明さのために、本開示に係る技術に直接的に関連しない処理ステップは、図から省略されている。
図15は、エンハンスメントレイヤの復号処理(図14のステップS63)における逆量子化に関連する処理の流れの一例を示すフローチャートである。図15に示した処理は、例えば、エンハンスメントレイヤ画像内のスライスごとに繰り返され得る。
(1)基本的な例
図16A〜図16Cは、本開示に係る技術のために採用され得るエンハンスメントレイヤのシンタックスの一例について説明するための説明図である。ここでは、エンハンスメントレイヤのPPSにおいて、QPパラメータ再利用フラグ及び量子化行列再利用フラグが符号化される。
図16D及び図16Eは、エンハンスメントレイヤのシンタックスの変形例をそれぞれ示している。これら変形例では、EL符号化部1bにより符号化され及びEL復号部6bにより復号されるSLパラメータは、図9Dを用いて説明したような参照レイヤ情報を含む。
本開示に係る技術は、様々なコーデックの組合せでのスケーラブル符号化に適用可能である。多重化されるレイヤの数は、2つ以上のいかなる数であってもよい。但し、標準化されていないコーデックの組合せが利用されると、デコーダが正常に動作しない可能性が生じ得る。そこで、予め定義されるコーデックの組合せのみが、階層的に符号化されることを許容されてもよい。その代わりに、いくつかのコーデックの組合せが、階層的に符号化されることを禁止されてもよい。
[7−1.様々な製品への応用]
上述した実施形態に係る画像符号化装置10及び画像復号装置60は、衛星放送、ケーブルTVなどの有線放送、インターネット上での配信、及びセルラー通信による端末への配信などにおける送信機若しくは受信機、光ディスク、磁気ディスク及びフラッシュメモリなどの媒体に画像を記録する記録装置、又は、これら記憶媒体から画像を再生する再生装置などの様々な電子機器に応用され得る。以下、4つの応用例について説明する。
図18は、上述した実施形態を適用したテレビジョン装置の概略的な構成の一例を示している。テレビジョン装置900は、アンテナ901、チューナ902、デマルチプレクサ903、デコーダ904、映像信号処理部905、表示部906、音声信号処理部907、スピーカ908、外部インタフェース909、制御部910、ユーザインタフェース911、及びバス912を備える。
図19は、上述した実施形態を適用した携帯電話機の概略的な構成の一例を示している。携帯電話機920は、アンテナ921、通信部922、音声コーデック923、スピーカ924、マイクロホン925、カメラ部926、画像処理部927、多重分離部928、記録再生部929、表示部930、制御部931、操作部932、及びバス933を備える。
図20は、上述した実施形態を適用した記録再生装置の概略的な構成の一例を示している。記録再生装置940は、例えば、受信した放送番組の音声データ及び映像データを符号化して記録媒体に記録する。また、記録再生装置940は、例えば、他の装置から取得される音声データ及び映像データを符号化して記録媒体に記録してもよい。また、記録再生装置940は、例えば、ユーザの指示に応じて、記録媒体に記録されているデータをモニタ及びスピーカ上で再生する。このとき、記録再生装置940は、音声データ及び映像データを復号する。
図21は、上述した実施形態を適用した撮像装置の概略的な構成の一例を示している。撮像装置960は、被写体を撮像して画像を生成し、画像データを符号化して記録媒体に記録する。
上述したスケーラブル符号化の利点は、様々な用途において享受され得る。以下、3つの用途の例について説明する。
第1の例において、スケーラブル符号化は、データの選択的な伝送のために利用される。図22を参照すると、データ伝送システム1000は、ストリーム記憶装置1001及び配信サーバ1002を含む。配信サーバ1002は、ネットワーク1003を介して、いくつかの端末装置と接続される。ネットワーク1003は、有線ネットワークであっても無線ネットワークであってもよく、又はそれらの組合せであってもよい。図22には、端末装置の例として、PC(Personal Computer)1004、AV機器1005、タブレット装置1006及び携帯電話機1007が示されている。
第2の例において、スケーラブル符号化は、複数の通信チャネルを介するデータの伝送のために利用される。図23を参照すると、データ伝送システム1100は、放送局1101及び端末装置1102を含む。放送局1101は、地上波チャネル1111上で、ベースレイヤの符号化ストリーム1121を放送する。また、放送局1101は、ネットワーク1112を介して、エンハンスメントレイヤの符号化ストリーム1122を端末装置1102へ送信する。
第3の例において、スケーラブル符号化は、映像の記憶のために利用される。図24を参照すると、データ伝送システム1200は、撮像装置1201及びストリーム記憶装置1202を含む。撮像装置1201は、被写体1211を撮像することにより生成される画像データをスケーラブル符号化し、多重化ストリーム1221を生成する。多重化ストリーム1221は、ベースレイヤの符号化ストリーム及びエンハンスメントレイヤの符号化ストリームを含む。そして、撮像装置1201は、多重化ストリーム1221をストリーム記憶装置1202へ供給する。
(1)マルチビューコーデックへの応用
マルチビューコーデックは、マルチレイヤコーデックの一種であり、いわゆる多視点映像を符号化し及び復号するための画像符号化方式である。図25は、マルチビューコーデックについて説明するための説明図である。図25を参照すると、3つの視点においてそれぞれ撮影される3つのビューのフレームのシーケンスが示されている。各ビューには、ビューID(view_id)が付与される。これら複数のビューのうちいずれか1つのビューが、ベースビュー(base view)に指定される。ベースビュー以外のビューは、ノンベースビューと呼ばれる。図25の例では、ビューIDが“0”であるビューがベースビューであり、ビューIDが“1”又は“2”である2つのビューがノンベースビューである。これらビューが階層的に符号化される場合、各ビューがレイヤに相当し得る。図中に矢印で示したように、ノンベースビューの画像は、ベースビューの画像を参照して符号化され及び復号される(他のノンベースビューの画像も参照されてよい)。
本開示に係る技術は、ストリーミングプロトコルに適用されてもよい。例えば、MPEG−DASH(Dynamic Adaptive Streaming over HTTP)では、解像度などのパラメータが互いに異なる複数の符号化ストリームがストリーミングサーバにおいて予め用意される。そして、ストリーミングサーバは、複数の符号化ストリームからストリーミングすべき適切なデータをセグメント単位で動的に選択し、選択したデータを配信する。このようなストリーミングプロトコルにおいて、1つの符号化ストリームの量子化に関連するパラメータが他の符号化ストリームにおいて再利用されてもよい。
本開示に係る技術は、例えば、システムLSI(Large Scale Integration)などのプロセッサ、複数のプロセッサを用いるモジュール、複数のモジュールを用いるユニット、ユニットにさらにその他の機能を付加したセットなどの様々な実装レベルにおいて実現されてよい。
本開示に係る技術をセットとして実現する場合の例について、図28を参照して説明する。図28は、ビデオセットの概略的な構成の一例を示すブロック図である。
図29は、ビデオプロセッサ1332の概略的な構成の一例を示すブロック図である。ビデオプロセッサ1332は、入力映像信号及び入力音声信号をそれぞれ符号化して映像データ及び音声データを生成する機能と、符号化された映像データ及び音声データを復号して出力映像信号及び出力音声信号を生成する機能と、を有する。
(1)コンテンツ再生システムの概要
まず、図31〜図33を用いて、本開示に係る技術を適用可能なコンテンツ再生システムについて概略的に説明する。図31は、コンテンツ再生システムの概要を示す説明図である。図31に示したコンテンツ再生システムは、コンテンツサーバ1610及び1611と、ネットワーク1612と、コンテンツ再生装置(クライアント装置)1620(1620A、1620B及び1620C)と、を含む。
図34は、コンテンツサーバ1610の構成の一例を示すブロック図である。図34を参照すると、コンテンツサーバ1610は、ファイル生成部1631、記憶部1632及び通信部1633を備える。
図35は、コンテンツ再生装置1620の構成の一例を示すブロック図である。図35を参照すると、コンテンツ再生装置1620は、通信部1651、記憶部1652、再生部1653、選択部1654及び位置取得部1656を備える。
図36は、コンテンツサーバ1611の構成の一例を示すブロック図である。図36を参照すると、コンテンツサーバ1611は、記憶部1671及び通信部1672を備える。
本節では、本開示に係る技術がWi−FiのP2Pモードを利用するシステムに応用される例について説明する。
図37及び図38は、Wi−FiのP2Pモードで形成される無線通信システムにおける基本的な動作シーケンスを示すシーケンス図である。ここでは、第1無線通信装置1701と第2無線通信装置1702との間でP2P(Peer to Peer)接続が確立され、特定のアプリケーションの動作が開始されるまでのシーケンスが示されている。より具体的には、図示したシーケンスは、Wi−Fiアライアンスにおいて標準化されたWi−Fiダイレクト(Wi−Fi P2Pとも呼ばれ得る)の仕様に従っている。
上述したデバイスディスカバリ手続及びサービスディスカバリ手続の仕組みを拡張し、L2リンクが確立される前に所望のアプリケーションをユーザに指定させることにより、L2リンク確立後のアプリケーション起動操作を省略することも可能である。そうした拡張のためのMACフレームのフレームフォーマットの一例を図39に、動作シーケンスの一例を図40にそれぞれ示す。
ここまで、図1〜図40を用いて、本開示に係る技術の実施形態について詳細に説明した。上述した実施形態によれば、第1レイヤを参照して復号される第2レイヤの色差成分の変換係数データを量子化し又は逆量子化する際に使用される量子化パラメータのための量子化パラメータオフセットが、上記第1レイヤの色差成分の量子化パラメータオフセットに基づいて設定される。従って、スケーラブル符号化において、量子化に関連するパラメータの冗長的な符号化を回避し、全体としての符号化効率を高めることができる。一般的に、色差成分の量子化パラメータの調整は、各画像に現れる色の傾向に依存する一方で、レイヤの相違(あるいは解像度の相違)には依存しない。従って、色差成分の量子化パラメータを調整するための量子化パラメータオフセットがレイヤ間で再利用されるとしても、調整を適切に行うことが可能である。
(1)
第1レイヤの色差成分に設定される第1の量子化パラメータオフセットに基づいて、前記第1レイヤを参照して復号される第2レイヤの色差成分に第2の量子化パラメータオフセットを設定する制御部と、
前記制御部により設定された前記第2の量子化パラメータオフセットを用いて算出される量子化パラメータで、前記第2レイヤの色差成分の変換係数データを逆量子化する逆量子化部と、
を備える画像処理装置。
(2)
前記第2の量子化パラメータオフセットは、前記第1の量子化パラメータオフセットと量子化パラメータオフセット差分との和に等しい、前記(1)に記載の画像処理装置。
(3)
前記画像処理装置は、符号化ストリームから前記量子化パラメータオフセット差分を復号する復号部、をさらに備える、前記(2)に記載の画像処理装置。
(4)
前記第1の量子化パラメータオフセットは、ピクチャ単位で前記第1レイヤに設定されるオフセットとスライス単位で前記第1レイヤに設定されるオフセットとの和に等しい、前記(1)〜(3)のいずれか1項に記載の画像処理装置。
(5)
前記第1の量子化パラメータオフセットは、ピクチャ単位で前記第1レイヤに設定されるオフセットに等しい、前記(1)〜(3)のいずれか1項に記載の画像処理装置。
(6)
前記制御部は、前記第2レイヤのCb成分及びCr成分について別々に、前記第2の量子化パラメータオフセットを設定する、前記(1)〜(5)のいずれか1項に記載の画像処理装置。
(7)
前記制御部は、符号化ストリームから復号される第1のフラグが前記第1の量子化パラメータオフセットに基づいて前記第2の量子化パラメータオフセットを設定すべきことを示している場合に、前記第1の量子化パラメータオフセットに基づいて前記第2の量子化パラメータオフセットを設定する、前記(1)〜(6)のいずれか1項に記載の画像処理装置。
(8)
前記制御部は、前記第1レイヤに設定される第1の量子化行列に基づいて、前記第2レイヤに第2の量子化行列を設定し、
前記逆量子化部は、前記制御部により設定された前記第2の量子化行列を用いて、前記第2レイヤの変換係数データを逆量子化する、
前記(1)〜(7)のいずれか1項に記載の画像処理装置。
(9)
前記制御部は、参照レイヤ情報が参照レイヤとして前記第1レイヤを指定する場合に、前記第1レイヤに設定される前記第1の量子化行列に基づいて、前記第2レイヤに前記第2の量子化行列を設定する、前記(8)に記載の画像処理装置。
(10)
前記制御部は、前記第1の量子化行列から前記第2の量子化行列を複製し又は予測する、前記(8)又は前記(9)に記載の画像処理装置。
(11)
前記制御部は、符号化ストリームから復号される第2のフラグが前記第1の量子化行列に基づいて前記第2の量子化行列を設定すべきことを示している場合に、前記第1の量子化行列に基づいて前記第2の量子化行列を設定する、前記(8)〜(10)のいずれか1項に記載の画像処理装置。
(12)
前記第2のフラグは、異なる量子化行列サイズ、異なる予測モード又は異なる色成分について別々に前記符号化ストリームから復号される、前記(11)に記載の画像処理装置。
(13)
前記制御部は、符号化ストリームから復号される第3のフラグに従って、前記第2の量子化行列を設定するための設定手法を選択する、前記(10)に記載の画像処理装置。
(14)
前記第3のフラグは、異なる量子化行列サイズ、異なる予測モード又は異なる色成分について別々に前記符号化ストリームから復号される、前記(13)に記載の画像処理装置。
(15)
前記第2レイヤは、HEVC(High Efficiency Video Coding)方式で符号化され、
前記制御部は、前記第1レイヤがAVC(Advanced Video Coding)方式で符号化される場合には、8×8画素以下のサイズを有する前記第2の量子化行列を前記第1の量子化行列に基づいて前記第2レイヤに設定し、16×16画素以上のサイズを有する第3の量子化行列を前記第1の量子化行列に基づくことなく前記第2レイヤに設定する、
前記(8)〜(14)のいずれか1項に記載の画像処理装置。
(16)
第1レイヤの色差成分に設定される第1の量子化パラメータオフセットに基づいて、前記第1レイヤを参照して復号される第2レイヤの色差成分に第2の量子化パラメータオフセットを設定することと、
設定された前記第2の量子化パラメータオフセットを用いて算出される量子化パラメータで、前記第2レイヤの色差成分の変換係数データを逆量子化することと、
を含む画像処理方法。
(17)
第1レイヤを参照して符号化される第2レイヤの色差成分の変換係数データを所与の量子化パラメータで量子化する量子化部と、
前記第1レイヤの色差成分に設定された第1の量子化パラメータオフセットと前記所与の量子化パラメータとに基づいて算出される、前記第2レイヤの色差成分の第2の量子化パラメータオフセットを符号化する符号化部と、
を備える画像処理装置。
(18)
前記量子化部は、所与の量子化行列を用いて、前記第2レイヤの変換係数データを量子化し、
前記符号化部は、デコーダが前記第1レイヤに設定される量子化行列に基づいて前記所与の量子化行列を前記第2レイヤに設定すべきである場合に、前記所与の量子化行列を符号化しない、
前記(17)に記載の画像処理装置。
(19)
前記符号化部は、前記所与の量子化行列を設定する際に参照すべき参照レイヤとして前記第1レイヤを指定する参照レイヤ情報を符号化する、前記(18)に記載の画像処理装置。
(20)
第1レイヤを参照して符号化される第2レイヤの色差成分の変換係数データを所与の量子化パラメータで量子化することと、
前記第1レイヤの色差成分に設定された第1の量子化パラメータオフセットと前記所与の量子化パラメータとに基づいて算出される、前記第2レイヤの色差成分の第2の量子化パラメータオフセットを符号化することと、
を含む画像処理方法。
1a ベースレイヤ符号化部
1b エンハンスメントレイヤ符号化部
15 量子化部
16 可逆符号化部
21 逆量子化部
40 量子化制御部
60,60v 画像復号装置(画像処理装置)
6a ベースレイヤ復号部
6b エンハンスメントレイヤ復号部
62 可逆復号部
63 逆量子化部
90 逆量子化制御部
Claims (20)
- 第1レイヤの色差成分に設定される第1の量子化パラメータオフセットに基づいて、前記第1レイヤを参照して復号される第2レイヤの色差成分に第2の量子化パラメータオフセットを設定する制御部と、
前記制御部により設定された前記第2の量子化パラメータオフセットを用いて算出される量子化パラメータで、前記第2レイヤの色差成分の変換係数データを逆量子化する逆量子化部と、
を備える画像処理装置。 - 前記第2の量子化パラメータオフセットは、前記第1の量子化パラメータオフセットと量子化パラメータオフセット差分との和に等しい、請求項1に記載の画像処理装置。
- 前記画像処理装置は、符号化ストリームから前記量子化パラメータオフセット差分を復号する復号部、をさらに備える、請求項2に記載の画像処理装置。
- 前記第1の量子化パラメータオフセットは、ピクチャ単位で前記第1レイヤに設定されるオフセットとスライス単位で前記第1レイヤに設定されるオフセットとの和に等しい、請求項1に記載の画像処理装置。
- 前記第1の量子化パラメータオフセットは、ピクチャ単位で前記第1レイヤに設定されるオフセットに等しい、請求項1に記載の画像処理装置。
- 前記制御部は、前記第2レイヤのCb成分及びCr成分について別々に、前記第2の量子化パラメータオフセットを設定する、請求項1に記載の画像処理装置。
- 前記制御部は、符号化ストリームから復号される第1のフラグが前記第1の量子化パラメータオフセットに基づいて前記第2の量子化パラメータオフセットを設定すべきことを示している場合に、前記第1の量子化パラメータオフセットに基づいて前記第2の量子化パラメータオフセットを設定する、請求項1に記載の画像処理装置。
- 前記制御部は、前記第1レイヤに設定される第1の量子化行列に基づいて、前記第2レイヤに第2の量子化行列を設定し、
前記逆量子化部は、前記制御部により設定された前記第2の量子化行列を用いて、前記第2レイヤの変換係数データを逆量子化する、
請求項1に記載の画像処理装置。 - 前記制御部は、参照レイヤ情報が参照レイヤとして前記第1レイヤを指定する場合に、前記第1レイヤに設定される前記第1の量子化行列に基づいて、前記第2レイヤに前記第2の量子化行列を設定する、請求項8に記載の画像処理装置。
- 前記制御部は、前記第1の量子化行列から前記第2の量子化行列を複製し又は予測する、請求項8に記載の画像処理装置。
- 前記制御部は、符号化ストリームから復号される第2のフラグが前記第1の量子化行列に基づいて前記第2の量子化行列を設定すべきことを示している場合に、前記第1の量子化行列に基づいて前記第2の量子化行列を設定する、請求項8に記載の画像処理装置。
- 前記第2のフラグは、異なる量子化行列サイズ、異なる予測モード又は異なる色成分について別々に前記符号化ストリームから復号される、請求項11に記載の画像処理装置。
- 前記制御部は、符号化ストリームから復号される第3のフラグに従って、前記第2の量子化行列を設定するための設定手法を選択する、請求項10に記載の画像処理装置。
- 前記第3のフラグは、異なる量子化行列サイズ、異なる予測モード又は異なる色成分について別々に前記符号化ストリームから復号される、請求項13に記載の画像処理装置。
- 前記第2レイヤは、HEVC(High Efficiency Video Coding)方式で符号化され、
前記制御部は、前記第1レイヤがAVC(Advanced Video Coding)方式で符号化される場合には、8×8画素以下のサイズを有する前記第2の量子化行列を前記第1の量子化行列に基づいて前記第2レイヤに設定し、16×16画素以上のサイズを有する第3の量子化行列を前記第1の量子化行列に基づくことなく前記第2レイヤに設定する、
請求項8に記載の画像処理装置。 - 第1レイヤの色差成分に設定される第1の量子化パラメータオフセットに基づいて、前記第1レイヤを参照して復号される第2レイヤの色差成分に第2の量子化パラメータオフセットを設定することと、
設定された前記第2の量子化パラメータオフセットを用いて算出される量子化パラメータで、前記第2レイヤの色差成分の変換係数データを逆量子化することと、
を含む画像処理方法。 - 第1レイヤを参照して符号化される第2レイヤの色差成分の変換係数データを所与の量子化パラメータで量子化する量子化部と、
前記第1レイヤの色差成分に設定された第1の量子化パラメータオフセットと前記所与の量子化パラメータとに基づいて算出される、前記第2レイヤの色差成分の第2の量子化パラメータオフセットを符号化する符号化部と、
を備える画像処理装置。 - 前記量子化部は、所与の量子化行列を用いて、前記第2レイヤの変換係数データを量子化し、
前記符号化部は、デコーダが前記第1レイヤに設定される量子化行列に基づいて前記所与の量子化行列を前記第2レイヤに設定すべきである場合に、前記所与の量子化行列を符号化しない、
請求項17に記載の画像処理装置。 - 前記符号化部は、前記所与の量子化行列を設定する際に参照すべき参照レイヤとして前記第1レイヤを指定する参照レイヤ情報を符号化する、請求項18に記載の画像処理装置。
- 第1レイヤを参照して符号化される第2レイヤの色差成分の変換係数データを所与の量子化パラメータで量子化することと、
前記第1レイヤの色差成分に設定された第1の量子化パラメータオフセットと前記所与の量子化パラメータとに基づいて算出される、前記第2レイヤの色差成分の第2の量子化パラメータオフセットを符号化することと、
を含む画像処理方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012275775 | 2012-12-18 | ||
JP2012275775 | 2012-12-18 | ||
JP2013144930 | 2013-07-10 | ||
JP2013144930 | 2013-07-10 | ||
PCT/JP2013/081406 WO2014097816A1 (ja) | 2012-12-18 | 2013-11-21 | 画像処理装置及び画像処理方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018158229A Division JP6610735B2 (ja) | 2012-12-18 | 2018-08-27 | 画像処理装置及び画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2014097816A1 true JPWO2014097816A1 (ja) | 2017-01-12 |
JP6406014B2 JP6406014B2 (ja) | 2018-10-17 |
Family
ID=50978159
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014553036A Active JP6406014B2 (ja) | 2012-12-18 | 2013-11-21 | 画像処理装置及び画像処理方法 |
JP2018158229A Active JP6610735B2 (ja) | 2012-12-18 | 2018-08-27 | 画像処理装置及び画像処理方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018158229A Active JP6610735B2 (ja) | 2012-12-18 | 2018-08-27 | 画像処理装置及び画像処理方法 |
Country Status (15)
Country | Link |
---|---|
US (3) | US9967578B2 (ja) |
EP (2) | EP2908526A4 (ja) |
JP (2) | JP6406014B2 (ja) |
KR (2) | KR102307099B1 (ja) |
CN (2) | CN109068136B (ja) |
AU (2) | AU2013365309A1 (ja) |
BR (1) | BR112015013768A2 (ja) |
CA (1) | CA2894637A1 (ja) |
CO (1) | CO7380755A2 (ja) |
MX (2) | MX345489B (ja) |
PH (1) | PH12015501311A1 (ja) |
RU (2) | RU2667719C1 (ja) |
SG (1) | SG11201504504YA (ja) |
WO (1) | WO2014097816A1 (ja) |
ZA (1) | ZA201503589B (ja) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9591302B2 (en) * | 2012-07-02 | 2017-03-07 | Microsoft Technology Licensing, Llc | Use of chroma quantization parameter offsets in deblocking |
US9414054B2 (en) | 2012-07-02 | 2016-08-09 | Microsoft Technology Licensing, Llc | Control and use of chroma quantization parameter values |
US10356405B2 (en) * | 2013-11-04 | 2019-07-16 | Integrated Device Technology, Inc. | Methods and apparatuses for multi-pass adaptive quantization |
US20150195549A1 (en) * | 2014-01-08 | 2015-07-09 | Qualcomm Incorporated | Support of non-hevc base layer in hevc multi-layer extensions |
MX2017004088A (es) | 2014-10-03 | 2017-07-07 | Nec Corp | Dispositivo de codificacion de video, dispositivo de descodificacion de video, metodo de codificacion de video, metodo de descodificacion de video y programa. |
EP3041233A1 (en) * | 2014-12-31 | 2016-07-06 | Thomson Licensing | High frame rate-low frame rate transmission technique |
WO2017063168A1 (zh) * | 2015-10-15 | 2017-04-20 | 富士通株式会社 | 图像编码方法、装置以及图像处理设备 |
CN106856571B (zh) * | 2015-12-09 | 2019-12-06 | 阿里巴巴集团控股有限公司 | 一种转码方法及装置 |
ES2817100B1 (es) | 2016-03-28 | 2022-04-13 | Kt Corp | Metodo y aparato para procesar senales de video |
US10432936B2 (en) * | 2016-04-14 | 2019-10-01 | Qualcomm Incorporated | Apparatus and methods for perceptual quantization parameter (QP) weighting for display stream compression |
WO2017197646A1 (zh) * | 2016-05-20 | 2017-11-23 | 华为技术有限公司 | 一种通信方法和装置 |
BR112019025471A2 (pt) * | 2017-06-09 | 2020-06-23 | Sony Semiconductor Solutions Corporation | Dispositivo de transmissão de figura, e, dispositivo de recepção de figura |
WO2019009776A1 (en) * | 2017-07-05 | 2019-01-10 | Telefonaktiebolaget Lm Ericsson (Publ) | DECODING VIDEO SAMPLE BLOCK |
US11019339B2 (en) * | 2017-07-12 | 2021-05-25 | Futurewei Technologies, Inc. | Fractional quantization parameter offset in video compression |
CN109819253B (zh) | 2017-11-21 | 2022-04-22 | 腾讯科技(深圳)有限公司 | 视频编码方法、装置、计算机设备和存储介质 |
US11463763B2 (en) | 2018-03-08 | 2022-10-04 | Dish Network L.L.C. | Reducing digital video recorder storage through reduced encoding of certain program portions |
US10873778B2 (en) * | 2018-03-08 | 2020-12-22 | Dish Network L.L.C. | Reducing digital video recorder storage through reduced encoding of certain program portions |
JP7105675B2 (ja) | 2018-11-02 | 2022-07-25 | 株式会社東芝 | 送信装置、サーバ装置、送信方法およびプログラム |
US11695883B2 (en) * | 2019-06-28 | 2023-07-04 | Sony Semiconductor Solutions Corporation | Transmitting apparatus, receiving apparatus, and transmission system |
TWI731579B (zh) * | 2020-02-11 | 2021-06-21 | 日商東芝股份有限公司 | 傳輸裝置、通訊系統、傳輸方法及電腦程式產品 |
WO2023132532A1 (ko) * | 2022-01-07 | 2023-07-13 | 엘지전자 주식회사 | 피쳐 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007266749A (ja) * | 2006-03-27 | 2007-10-11 | Sanyo Electric Co Ltd | 符号化方法 |
Family Cites Families (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6788740B1 (en) * | 1999-10-01 | 2004-09-07 | Koninklijke Philips Electronics N.V. | System and method for encoding and decoding enhancement layer data using base layer quantization data |
US7263124B2 (en) | 2001-09-26 | 2007-08-28 | Intel Corporation | Scalable coding scheme for low latency applications |
KR100973216B1 (ko) * | 2002-04-23 | 2010-07-30 | 노키아 코포레이션 | 비디오 부호화 시스템에서 양자화 변수들을 표시하는 방법 및 장치 |
JP4196726B2 (ja) * | 2003-05-14 | 2008-12-17 | ソニー株式会社 | 画像処理装置および画像処理方法、記録媒体、並びに、プログラム |
EP1675402A1 (en) * | 2004-12-22 | 2006-06-28 | Thomson Licensing | Optimisation of a quantisation matrix for image and video coding |
US7995656B2 (en) * | 2005-03-10 | 2011-08-09 | Qualcomm Incorporated | Scalable video coding with two layer encoding and single layer decoding |
JP2007006390A (ja) * | 2005-06-27 | 2007-01-11 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
US8320453B2 (en) * | 2005-07-08 | 2012-11-27 | Lg Electronics Inc. | Method for modeling coding information of a video signal to compress/decompress the information |
US20070230564A1 (en) * | 2006-03-29 | 2007-10-04 | Qualcomm Incorporated | Video processing with scalability |
US7773672B2 (en) * | 2006-05-30 | 2010-08-10 | Freescale Semiconductor, Inc. | Scalable rate control system for a video encoder |
CN102685496B (zh) * | 2006-07-10 | 2014-11-05 | 夏普株式会社 | 用于组合多层比特流中的层的方法和系统 |
US8059714B2 (en) * | 2006-07-10 | 2011-11-15 | Sharp Laboratories Of America, Inc. | Methods and systems for residual layer scaling |
KR101366249B1 (ko) * | 2007-06-28 | 2014-02-21 | 삼성전자주식회사 | 스케일러블 영상 부호화장치 및 방법과 그 영상 복호화장치및 방법 |
US9648325B2 (en) * | 2007-06-30 | 2017-05-09 | Microsoft Technology Licensing, Llc | Video decoding implementations for a graphics processing unit |
KR101375663B1 (ko) * | 2007-12-06 | 2014-04-03 | 삼성전자주식회사 | 영상을 계층적으로 부호화/복호화하는 방법 및 장치 |
US8897359B2 (en) * | 2008-06-03 | 2014-11-25 | Microsoft Corporation | Adaptive quantization for enhancement layer video coding |
US20100309987A1 (en) * | 2009-06-05 | 2010-12-09 | Apple Inc. | Image acquisition and encoding system |
US20120063515A1 (en) * | 2010-09-09 | 2012-03-15 | Qualcomm Incorporated | Efficient Coding of Video Parameters for Weighted Motion Compensated Prediction in Video Coding |
MX2013001774A (es) * | 2010-09-30 | 2013-03-18 | Panasonic Corp | Metodo de decodificacion de imagen, metodo de codificacion de imagen, aparato de decodificacion de imagen, aparato codificacion de imagen, programa, y circuito integrado. |
BR122014031521B1 (pt) | 2011-02-10 | 2022-08-23 | Velos Media International Limited | Dispositivo e método de processamento de imagem |
US9641840B2 (en) * | 2011-05-20 | 2017-05-02 | Sony Corporation | Processing device and image processing method for encoding and decoding image |
TWI575933B (zh) * | 2011-11-04 | 2017-03-21 | 杜比實驗室特許公司 | 階層式視覺動態範圍編碼中之層分解技術 |
EP2805511B1 (en) * | 2012-01-20 | 2019-03-06 | Sun Patent Trust | Methods and apparatus for encoding and decoding video using temporal motion vector prediction |
US9635356B2 (en) * | 2012-08-07 | 2017-04-25 | Qualcomm Incorporated | Multi-hypothesis motion compensation for scalable video coding and 3D video coding |
US9344718B2 (en) * | 2012-08-08 | 2016-05-17 | Qualcomm Incorporated | Adaptive up-sampling filter for scalable video coding |
US20150229967A1 (en) * | 2012-08-21 | 2015-08-13 | Samsung Electronics Co., Ltd. | Inter-layer video coding method and device for predictive information based on tree structure coding unit, and inter-layer video decoding method and device for predictive informationbased on tree structure coding unit |
WO2014166328A1 (en) * | 2013-04-08 | 2014-10-16 | Mediatek Singapore Pte. Ltd. | Method and apparatus for quantization matrix signaling and representation in scalable video coding |
-
2013
- 2013-11-21 CN CN201811100458.9A patent/CN109068136B/zh active Active
- 2013-11-21 EP EP13863956.2A patent/EP2908526A4/en not_active Withdrawn
- 2013-11-21 RU RU2017137110A patent/RU2667719C1/ru not_active IP Right Cessation
- 2013-11-21 AU AU2013365309A patent/AU2013365309A1/en not_active Abandoned
- 2013-11-21 US US14/441,671 patent/US9967578B2/en not_active Expired - Fee Related
- 2013-11-21 WO PCT/JP2013/081406 patent/WO2014097816A1/ja active Application Filing
- 2013-11-21 RU RU2015122700A patent/RU2639250C2/ru not_active IP Right Cessation
- 2013-11-21 MX MX2015007443A patent/MX345489B/es active IP Right Grant
- 2013-11-21 KR KR1020217015631A patent/KR102307099B1/ko active IP Right Grant
- 2013-11-21 SG SG11201504504YA patent/SG11201504504YA/en unknown
- 2013-11-21 BR BR112015013768A patent/BR112015013768A2/pt not_active Application Discontinuation
- 2013-11-21 KR KR1020157013021A patent/KR102258356B1/ko active IP Right Grant
- 2013-11-21 CN CN201380064914.8A patent/CN104871539B/zh active Active
- 2013-11-21 CA CA2894637A patent/CA2894637A1/en not_active Abandoned
- 2013-11-21 JP JP2014553036A patent/JP6406014B2/ja active Active
- 2013-11-21 MX MX2017001340A patent/MX367546B/es unknown
- 2013-11-21 EP EP17181919.6A patent/EP3273691B1/en active Active
-
2015
- 2015-05-21 ZA ZA2015/03589A patent/ZA201503589B/en unknown
- 2015-06-03 CO CO15126734A patent/CO7380755A2/es unknown
- 2015-06-09 PH PH12015501311A patent/PH12015501311A1/en unknown
-
2018
- 2018-02-09 US US15/892,972 patent/US10368082B2/en active Active
- 2018-02-16 AU AU2018201160A patent/AU2018201160B2/en not_active Expired - Fee Related
- 2018-08-27 JP JP2018158229A patent/JP6610735B2/ja active Active
-
2019
- 2019-05-08 US US16/406,616 patent/US10609400B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007266749A (ja) * | 2006-03-27 | 2007-10-11 | Sanyo Electric Co Ltd | 符号化方法 |
Non-Patent Citations (2)
Title |
---|
SHAN LIU,KAZUSHI SATO: "Support of ChromaQPOffset in HEVC", JOINT COLLABORATIVE TEAM ON VIDEO CODING(JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11 7TH ME, vol. JCTVC-G509, JPN6018032240, 9 November 2011 (2011-11-09), US * |
YILIANG BAO,MARTA KARCZEWICZ: "CE09:Improved quantization for FGS coding", JOINT VIDEO TEAM(JVT)OF ISO/IEC MPEG & ITU-T VCEG(ISO/IEC JTC1/SC29/WG11 AND ITU-T SG16 Q.6) 16TH ME, vol. JVT-P 053, JPN6018032239, 21 July 2005 (2005-07-21), US * |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6610735B2 (ja) | 画像処理装置及び画像処理方法 | |
AU2020200093B2 (en) | Image processing device and method | |
JP6455434B2 (ja) | 画像処理装置及び画像処理方法 | |
US20230308646A1 (en) | Image encoding device and method and image decoding device and method | |
WO2014203763A1 (ja) | 復号装置および復号方法、並びに、符号化装置および符号化方法 | |
JPWO2015005025A1 (ja) | 画像処理装置及び画像処理方法 | |
JP2015192381A (ja) | 画像処理装置及び画像処理方法 | |
WO2015005132A1 (ja) | 画像符号化装置および方法、並びに画像復号装置および方法 | |
WO2014203505A1 (en) | Image decoding apparatus, image encoding apparatus, and image processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161102 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161102 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180821 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180903 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6406014 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |